当前位置: 首页 > article >正文

ubuntu安装deepseek

1、安装ollama

curl -fsSL https://ollama.com/install.sh | sh

Download Ollama on Linux

2、安装 deepseek,选择合适大小的,因为显存大

ollama run deepseek-r1:70b

deepseek-r1

3、设置ollama监听端口

sudo vim /etc/systemd/system/ollama.service
Environment="OLLAMA_HOST=0.0.0.0"
Environment="OLLAMA_ORIGINS=*"
systemctl daemon-reload
systemctl restart ollama



[2024-06]-[大模型]-[DEBUG]- ollama webui 11434 connection refused_connection error: cannot connect to host host.dock-CSDN博客

4、安装open-webui

docker run -d -p 3000:8080 -e OLLAMA_BASE_URL=http://127.0.0.1:11434 -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main

第一个是管理员,可以在管理员界面设置允许用户注册,并且开放模型权限。


如果涉及到docker删除,然后再启动容器

docker stop openweb-ui
docker rm openweb-ui

如果涉及到需要常驻显存

sudo vim /etc/systemd/system/ollama.service
OLLAMA_KEEP_ALIVE=-1
systemctl daemon-reload
systemctl restart ollama

http://www.kler.cn/a/535265.html

相关文章:

  • 代码随想录算法训练营| 二叉树总结
  • 专题:剑指offer
  • 文献阅读分享《新闻推荐中的审议式多样性:操作化与实验用户研究》
  • Windows 中学习Docker环境准备3、在Ubuntu中安装Docker
  • Spring Boot 2 快速教程:WebFlux优缺点及性能分析(四)
  • 零代码搭建个人博客—Zblog结合内网穿透发布公网
  • 【教学】推送docker仓库
  • 关于使用numpy进行数据解析性能优化的几点认识
  • 反向代理模块你那会
  • Java数据结构与算法之“树”
  • 【BUUCTF逆向题】[MRCTF2020]Transform
  • 用NeuralProphet预测股价:AI金融新利器(附源码)
  • FPGA与ASIC:到底选哪个好?
  • 如何安装LangChain软件包
  • intra-mart实现简易登录页面笔记
  • C语言之函数指针
  • wait/notify/join/设计模式
  • 无人机动力套(电机、电调)技术详解
  • mysql8的并行复制介绍
  • Git 远程仓库的操作与协作
  • 离散浣熊优化算法(DCOA)求解大规模旅行商问题(Large-Scale Traveling Salesman Problem,LTSP),MATLAB代码
  • 基于Typescript,使用Vite构建融合Vue.js的Babylon.js开发环境
  • 2025年Android NDK超全版本下载地址
  • Pycharm 2024版本出现 We could not validate your license怎么办?解决方法一步到位!
  • 疯狂SQL转换系列- SQL for Milvs2.4
  • GD32F4xx系列微控制器中,定时器可以配置为霍尔传感器模式,用于处理霍尔传感器的输出信号