当前位置: 首页 > article >正文

本地运行 minigpt-4

1.环境部署

参考官方自带的README.MD,如果不想看官方的,也可参考MiniGPT-4|开源免费可本地进行图像对话交互的国产高级大语言增强视觉语言理解模型安装部署教程 - openAI

当然,所有的都要按照作者说明来,特别是版本号

当然,按照上面操作,我也是遇到了一些问题,如下

1. "Tokenizer class LLaMATokenizer does not exist or is not currently imported"

解决办法:把 llama-13b-hf/tokenizer_config.json 中 "tokenizer_class": "LLaMATokenizer" 改为 "tokenizer_class": "LlamaTokenizer".

参考:Mistake in the preparation of vicuna weights (error when loading delta weights) · Issue #52 · Vision-CAIR/MiniGPT-4 · GitHub

 2. ModuleNotFoundError: No module named 'fsspec.asyn

解决办法:pip install --upgrade 

不过搜的时候是在google出来解决办法,百度没搜到

https://github.com/binary-husky/gpt_academic/issues/114#issuecomment-1488924452

3. 

 4.

5.

6.

 7.

 8. 这个报的错,还提示怎么解决,解决就是参考9

9. 解决8的文件,按照里面的提示,pip install 里面的库

 10. 这个报错是 minigpt4_eval.yaml 中 ckpt 加载 pretrained_minigpt4.pth 需要指定到 .pth,我之前只是指定到所在文件夹

后面就运行加载成功了,如下:

 11. 这个是我运行的时候,有好多卡,这个 需要在 demo.py 指定只运行在某张卡上,设置如下:

os.environ['CUDA_VISIBLE_DEVICES'] = '2'加载

加载成功后,但是在把其提示的ip输入到浏览器,打不开,很奇怪,后来参考到别人这个,我想到把我的服务器ip写到demo.py中,然后就可以打开了,不过打开还需要有梯子,还好我有梯子

Error:Cannot load 127.0.0.1:7860 · Issue #99 · Vision-CAIR/MiniGPT-4 · GitHub


 

 运行后,输入对话,又报错,暂时还没解决。。。

参考:

1.MiniGPT-4|开源免费可本地进行图像对话交互的国产高级大语言增强视觉语言理解模型安装部署教程 - openAI

 这个网址好像是中文版openAI,感觉还不错


http://www.kler.cn/a/14299.html

相关文章:

  • TCP FACK 与 RACK
  • 改进YOLOv8 | 即插即用篇 | YOLOv8 引入 RepVGG 重参数化模块 |《RepVGG:让VGG风格的卷积神经网络再次伟大》
  • Ansys Zemax | 设计抬头显示器时要使用哪些工具 – 第一部分
  • Adobe国际认证证书,深化设计师个人优势!
  • shell脚本备份postgres SQL数据库(同台服务器备份脚本)
  • 前端异步编程全套:xmlhttprequest > ajax > promise > async/await
  • 打造高效团队利器,掌握必备技能,揭秘完美工具箱——DevOps!
  • 运用SQL查询mysql,sersql,oracle所有数据库名和表名
  • 今天主要谈谈关于申请美国专利的一些问题
  • 数据库基础篇 《17.触发器》
  • Hadoop2.x集群搭建(centos7、VMware、finalshell)
  • 丁鹿学堂:2023最新vue3学习指南(vue3最简单demo)
  • 【致敬未来的攻城狮计划】— 连续打卡第十天:FSP固件库开发及FSP配置详解。
  • 20230425----重返学习-vue项目-vue自定义指令-vue-cli的配置
  • CentOS 7中安装配置Nginx的教程指南
  • linux waitpid函数详解
  • OrCAD Capture CIS使用MySQL数据库
  • android studio Activity发送数据
  • 零基础抽象轻松MYSQL
  • nn.Linear(),全连接层:将输入值做线性变换