当前位置: 首页 > article >正文

正确部署Baichuan2(Ubuntu20.4) 步骤及可能出现的问题

部署其实是不太复杂的,但实际上也耗费了接近2-3天的时间去不断的设置

1 硬件配置信息  采用esxi 虚拟化的方式将T4 卡穿透给esxi 种的ubuntu20.4虚拟机

CPU给到8 core 内存至少32GB以上  T4卡是16GB

2 预先准备OS环境 这里使用的是ubuntu20.4版本,esxi中需要设置uefI启动方式,否则会不识别到T4卡或者T4卡的驱动无法安装正确

3 下载最新的驱动和cuda版本以及cudnn的版本 及Anaconda信息如下

可以通过命令进行确认,这里需要注意的是环境变量需要设置好,主要是cuda和conda

~/.bashrc

确认T4卡是否正常 可以看到已经在使用中

4 安装anaconda 后需要激活相应的环境

conda create -n baichuan2 python=3.10

创建后会有提示进行相应的组件下载,这里建议能有科学上网或者代理类似的

ubuntu下面直接使用临时会话的代理的命令是:

export http_proxy=htt


http://www.kler.cn/news/108947.html

相关文章:

  • RateLimiter限流
  • 安装pandas报错
  • [毕设记录]@开题调研:外文博客搬运整理
  • 比较 opacity: 0、visibility: hidden、display: none
  • Hive SQL的编译过程
  • M1安装OpenPLC Editor
  • 2318.不同骰子序列的数目
  • 在Linux上使用Docker实现应用程序打包和分发
  • Day10力扣打卡
  • DIANA算法c++实现
  • Annotorious入门教程:图片注释工具
  • React 生成传递给无障碍属性的唯一 ID
  • 【Git企业开发】第一节.Git 初识
  • 队列(Queue)概念+通过单、双链表来模拟队列+环形队列+OJ面试题(用队列实现栈、用栈实现队列、设计环形队列)
  • [Python]unittest-单元测试
  • Pytorch detach()方法
  • Transformers实战(二)快速入门文本相似度、检索式对话机器人
  • ChatGPT扩展系列之ChatExcel
  • Python连接数据库报错处理
  • 数组OJ题汇总(一)
  • PHP下载文件
  • Linux shell编程学习笔记16:bash中的关联数组
  • 高级深入--day42
  • 缓解大模型幻觉问题的解决方案
  • Python算法例2 判断平方数
  • python基础语法(十一)
  • 【wespeaker】模型ECAPA_TDNN介绍
  • 【MATLAB源码-第58期】基于蛇优化算法(SO)和粒子群优化算法(PSO)的栅格地图路径规划最短路径和适应度曲线对比。
  • 【Flutter】Flutter 中的图片管理 图片优化的最佳实践
  • pandas 统计函数