加载模型时出现 OSError: Unable to load weights from pytorch checkpoint file 报错的解决

这篇具有很好参考价值的文章主要介绍了加载模型时出现 OSError: Unable to load weights from pytorch checkpoint file 报错的解决。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

报错信息

  • 查了下,在网上还是个比较常见的报错
    一般为加载某模型时突然报错
    加载模型时出现 OSError: Unable to load weights from pytorch checkpoint file 报错的解决

原因查明

  • 一般为下载某个 XXX_model.bin 的时候下载报错了
    而下载源可以看到为 HuggingFace

网传解决措施

  • 首先得看看你是下载哪个模型报错了。像我这里有一个中间模型,所以不知道是哪个低层模型下载报错了。
    打开 ~/.cache/huggingface/hub,这里 ~ 表示本机用户名
    若有多个模型,你可以看一下修改日期是今天的为哪个
    加载模型时出现 OSError: Unable to load weights from pytorch checkpoint file 报错的解决
    这里发现,是模型 potsawee--t5-large-generation-squad-QuestionAnswer
    HuggingFace 上搜索相应模型,自行下载,比如我这里即为 网址
    加载模型时出现 OSError: Unable to load weights from pytorch checkpoint file 报错的解决
    该文件下载到刚刚那个缓存文件夹中对应的放那些files的文件夹。
  • 做法二:删除该缓存文件夹中所有东西,再运行一遍代码。

好消息

  • 虽然貌似没有报错,但是加载 selfcheck_mqag 模型的时候内存完全吃完了,卡到死机也没跑完初始化,可能是没问题了只是太吃内存了
    对于一般的小模型该报错可能可以直接解决了。

我的解决措施

  • 既然本机实在是跑不了,大不了不跑本机,去 Colab 上跑
    见我的博客,关于Colab的简单应用

  • 首先代码放进去,然后先跑个 install 包命令
    加载模型时出现 OSError: Unable to load weights from pytorch checkpoint file 报错的解决

  • 然后再运行代码
    加载模型时出现 OSError: Unable to load weights from pytorch checkpoint file 报错的解决

  • 发现对于所有的文件,包括 bin 文件都成功安装。
    初始化成功,且不吃本机资源, n i c e nice nice
    加载模型时出现 OSError: Unable to load weights from pytorch checkpoint file 报错的解决

  • yy:MQAG 也太 tm 吃资源了文章来源地址https://www.toymoban.com/news/detail-482849.html

到了这里,关于加载模型时出现 OSError: Unable to load weights from pytorch checkpoint file 报错的解决的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • pyrender库报错解决方法:‘Unable to load OpenGL library’

    在 pip install pyrender 成功安装后,调用 pyrender 库时报错: OSError: (‘GL: cannot open shared object file: No such file or directory’, ‘GL’, None) ImportError: (‘Unable to load OpenGL library’, ‘GL: cannot open shared object file: No such file or directory’, ‘GL’, None) 报错截图: 这种问题一般会出现在本机/d

    2024年01月21日
    浏览(52)
  • 使用rt-thread Studio下载固件时出现Unable to enter Isp mode

    根据 我发现我缺了图中的文件夹  解决方法: 在rt-thread studio的sdk管理包中下载  

    2024年02月16日
    浏览(31)
  • Unable to retrieve version information from Elasticsearch nodes.

    [error][elasticsearch-service] Unable to retrieve version information from Elasticsearch nodes. connect ECONNREFUSED 127.0.0.1:9200 今天在自己本地测试启动ElasticSearch和Kibana时,ElasticSearch已经启动的情况下,去启动Kibana时,报:Unable to retrieve version information from Elasticsearch nodes.  因为都是在本地,可能是因

    2024年02月11日
    浏览(35)
  • error: unable to read askpass response from 解决办法

    出现这个报错,我认为原因与你的码云账号有关,因为我在网上大量搜过这个问题,最后 检查了一番原来是gitee账号登录过期,于是重新进行登录,可是登录成功还是提示错误,最后网上找了好久的方法终于找到解决办法,特此记录一下。 直接修改项目目录下面的.git文件夹

    2024年02月10日
    浏览(28)
  • 【electron】electron安装过慢和打包报错:Unable to load file:

    一、安装过慢问题: 一直处于安装过程 【 解决 】 二、打包报错:Unable to load file: 报错详情: 【 原因 】路径有中文,改为全英文路径

    2024年02月13日
    浏览(41)
  • win10 hadoop报错 unable to load native-hadoop library

    win10 安装hadoop执行hdfs -namenode format 和运行hadoop的start-all报错 unable to load native-hadoop library 验证: hadoop checknative -a 这个命令返回都是false是错的 返回下图是正确的 winutils: true D:softhadoop-3.0.0binwinutils.exe Native library checking: hadoop:  true D:softhadoop-3.0.0binhadoop.dll zlib:    false

    2024年02月15日
    浏览(32)
  • 安装git-lfs时出现Unable to locate package git-lfs的解决方案

      大家好,我是爱编程的喵喵。双985硕士毕业,现担任全栈工程师一职,热衷于将数据思维应用到工作与生活中。从事机器学习以及相关的前后端开发工作。曾在阿里云、科大讯飞、CCF等比赛获得多次Top名次。现为CSDN博客专家、人工智能领域优质创作者。喜欢通过博客创作

    2024年02月05日
    浏览(35)
  • Unable to load io.netty.resolver.dns.macos.MacOSDnsServerAddressStreamProvider解决

    出现这个错是因为项目使用到了网关之类的,我的是getaway模块路由转发报错 网上百度一大堆,但是与我的好像都不符合,因为我这个不是第一次就不行的,是之前可以,所以大概率不是他们所说的依赖问题。 解决方法:换个网络,这里可以直接选择自己的热点试下

    2024年02月10日
    浏览(27)
  • 解决Django中调页面时出现“Did you forget to register or load this tag”报错

    在HTML文件中,{{title}},{{lanyy}},django 默认规定的语法,用{{}}包起来的变量叫做模板变量。 django渲染模板时会将大括号中的变量替换为循环调用变量,最后显示的是传递的值。 {% load static %} 正确的引入static文件下的CSS和JavaScript。 用{% %}包起来的叫做模板标签。 {% empty %}的作

    2024年04月25日
    浏览(25)
  • Unable to load native-hadoop library for your platform解决方法

    1、在执行hadoop命令的时候出现如下错误,不能加载Hadoop库 2、使用 hadoop checknative -a 检查发现本地并没有库 3、进入Hadoop下的 libnative 发现是并不是空文件夹 4、所以? 该博客https://blog.csdn.net/aubekpan/article/details/863…的方法也就行不通了! 准备试试这个:https://wenku.baidu.com/v

    2024年02月03日
    浏览(27)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包