当前位置: 首页 > article >正文

DeepSeek本地部署的一些问题记录

1、模型怎么不保存到C盘:关掉ollama之后,设置环境变量:OLLAMA_MODELS,环境变量的地址,改为你想要的地址,参考文章:
https://blog.csdn.net/u012151594/article/details/142062199

2、ollama rm 模型名,删除新建的模型,
缓存文件 C:\Users\Administrator.ollama,找你对应的目录,删除即可

3、1.5b 模型,4GB显存就能跑。
7b、8b 模型,8GB显存就能跑。
14b 模型,12GB显存能跑。
32b 模型,24GB显存能跑。

4、A 卡也能跑,不过需要支持 rocm 的 ollama。
5、本地部署能突破限制,但是需要自己设置 system 绕过规则,也可以自己 finetune 模型。


http://www.kler.cn/a/532103.html

相关文章:

  • 计算机视觉-边缘检测
  • SAP HCM 回溯分析
  • 金山打字游戏2010绿色版,Win7-11可用DxWnd完美运行
  • Java中的泛型及其用途是什么?
  • LeetCode:53.最大子序和
  • MySQL子查询
  • Linux:基础IO(二.缓冲区、模拟一下缓冲区、详细讲解文件系统)
  • 浏览器查询所有的存储信息,以及清除的语法
  • 20250204在Ubuntu22.04下配置荣品的RK3566开发板的Android13的编译环境
  • 网站快速收录:如何优化网站本地搜索排名?
  • 昆明理工大学2025通信复试真题及答案-通信核心课程综合
  • ORB-SLAM2源码学习:KeyFrame.cc③: void KeyFrame::AddConnection更新连接权重
  • 字节序与Socket编程
  • 想品客老师的第十一天:模块化开发
  • Java线程创建与管理:继承、实现、Callable与线程池
  • 【Java知识】使用Java实现地址逆向解析到区划信息
  • sql字符串函数及字符拼接函数
  • kubernetes 核心技术-集群安全机制 RBAC
  • 流式学习(简易版)
  • 刷题笔记 哈希表-1 哈希表理论基础
  • AI 编程工具—Cursor进阶使用 Agent模式
  • 【棋弈云端】网页五子棋项目测试报告
  • 趣味Python100例初学者练习01
  • Chapter 6 -Fine-tuning for classification
  • 解析Python装饰器高级用法6项
  • 算法随笔_38: 最多能完成排序的块