【下载预训练模型失败】OSError: Consistency check failed: file should be of size xxx but has size xxx

问题描述

这个错误表明在下载预训练模型文件pytorch_model.bin时出现了一致性检查失败。下载的文件大小与期望的文件大小不一致。

解决方法

如果在使用vpn,那就先关闭代理。

代码中加上force_download=True和resume_download=False参数,强制重新下载模型文件并禁用断点续传。

示例:

from transformers import AutoTokenizer, AutoModelForSeq2SeqLM

tokenizer = AutoTokenizer.from_pretrained("csebuetnlp/mT5_multilingual_XLSum", force_download=True, resume_download=False)
model = AutoModelForSeq2SeqLM.from_pretrained("csebuetnlp/mT5_multilingual_XLSum", force_download=True, resume_download=False)

如果问题仍然存在,检查网络,最重要的一点:关闭代理!!!

本文来自网络,不代表协通编程立场,如若转载,请注明出处:https://www.net2asp.com/4d205064f6.html