报错ValueError: Can't find 'adapter_config.json'
  B5pePHcsyPxf 2023年11月01日 162 0

前言

在做组内2030项目时,我具体做的一个工作是对大模型进行LoRA微调,在整个过程中有许多坑,其中有些值得记录的问题,于是便产生了这篇博客。

问题

我在得到微调好的模型后,需要对模型进行性能测评。在加载模型时,遇到如下报错

ValueError: Can't find 'adapter_config.json'

补充:报错截图忘截了,但关键报错信息如上。

解决方法

这个问题我找了几种解决方法都没用,看到朋友进行微调生成的模型能够成功评测,才明白原来是微调后的模型文件不完整的原因啊~T_T

下面是可以进行成功加载并进行评测的模型文件构成:
image

下面是我微调后不能成功加载的模型文件构成:
image

两相对比,发现缺少了文件名以adapter开头的两个文件。

在确保我和朋友代码一样的情况下,对比了我和他环境中安装的包,结果发现我的transformers版本号为4.29.2,他的transformers版本号为4.31.0

于是使用如下命令重新安装transformers,再次微调训练模型,可以发现模型文件便完整了。_

pip install transformers==4.31.0
【版权声明】本文内容来自摩杜云社区用户原创、第三方投稿、转载,内容版权归原作者所有。本网站的目的在于传递更多信息,不拥有版权,亦不承担相应法律责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@moduyun.com

  1. 分享:
最后一次编辑于 2023年11月08日 0

暂无评论

推荐阅读
  NnaYPU9EV93V   2024年05月08日   50   0   0 大模型
  7B6SM42ujHWs   2024年04月10日   58   0   0 大模型
  eKreP5gc7PAg   2024年04月20日   51   0   0 大模型
  zhNCThJtfE8g   2024年04月16日   104   0   0 大模型
B5pePHcsyPxf