码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • No module named ‘torch.distributed.checkpoint.format_utils问题解决


    完整代码:

    Traceback (most recent call last):
      File "/data/user/BMLU-use/src/English_chat/qwen1.5.py", line 97, in <module>
        main(model_path=args.model_path,max_length=args.max_length,name=args.name)
      File "/data/user/BMLU-use/src/English_chat/qwen1.5.py", line 76, in main
        model = AutoModelForCausalLM.from_pretrained(
      File "/data/user/zwh_llm/lib/python3.10/site-packages/transformers/models/auto/auto_factory.py", line 562, in from_pretrained
        model_class = _get_model_class(config, cls._model_mapping)
      File "/data/user/zwh_llm/lib/python3.10/site-packages/transformers/models/auto/auto_factory.py", line 383, in _get_model_class
        supported_models = model_mapping[type(config)]
      File "/data/user/zwh_llm/lib/python3.10/site-packages/transformers/models/auto/auto_factory.py", line 734, in __getitem__
        return self._load_attr_from_module(model_type, model_name)
      File "/data/user/zwh_llm/lib/python3.10/site-packages/transformers/models/auto/auto_factory.py", line 748, in _load_attr_from_module
        return getattribute_from_module(self._modules[module_name], attr)
      File "/data/user/zwh_llm/lib/python3.10/site-packages/transformers/models/auto/auto_factory.py", line 692, in getattribute_from_module
        if hasattr(module, attr):
      File "/data/user/zwh_llm/lib/python3.10/site-packages/transformers/utils/import_utils.py", line 1525, in __getattr__
        module = self._get_module(self._class_to_module[name])
      File "/data/user/zwh_llm/lib/python3.10/site-packages/transformers/utils/import_utils.py", line 1537, in _get_module
        raise RuntimeError(
    RuntimeError: Failed to import transformers.models.qwen2.modeling_qwen2 because of the following error (look up to see its traceback):
    Failed to import transformers.generation.utils because of the following error (look up to see its traceback):
    No module named 'torch.distributed.checkpoint.format_utils'
    

    解决方法:更新torch和torchvision

    pip install --upgrade torch torchvision
    

    参考资料:
    https://stackoverflow.com/questions/59012616/problem-importing-module-modulenotfounderror-no-module-named-torch-utils-chec

  • 相关阅读:
    年薪50W的数字前端设计工程师是做什么的?
    大数据Flink(八十六):DML:Group 聚合和Over 聚合
    windows桌面程序与服务程序通过公共文件目录交互
    安卓循环遍历计时器
    scrcpy远程投屏控制Android
    栈与队列(JAVA)
    NFC 音乐墙 (不限手机)[web 接口服务实现-折腾记录]
    快鲸SCRM如何助力企业高效运营私域流量?
    sovits远程访问设置
    使用vue-cl搭建SPA项目
  • 原文地址:https://blog.csdn.net/zwhszdx/article/details/139712024
  • 最新文章
  • 沪漂五周年了:我越来越迷茫了
    Agentic Skill Routing 实战:别再把所有 Skill 塞进 AI Agent 上下文
    MySQL-Seconds_behind_master的精度误差
    [MAF预定义ChatClient中间件-03]CachingChatClient——利用缓存省钱省时间
    AI的至暗历史:从万众期待到被政府撤资,AI的两次死亡徘徊
    Agent OS :五种驯服不确定性的范式
    PortSwigger SQL注入LAB11
    数据库即时编译JIT
    [Begin]AI Learn Data Day 0
    深度学习进阶(二十七)现代 LLM 的核心架构设计其二:SwiGLU
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
小工具 小游戏
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1

京公网安备 11010502049817号