当前位置: 首页 > article >正文

ollama 在 Linux 环境的安装

ollama 在 Linux 环境的安装

介绍

他的存在在我看来跟 docker 的很是相似,他把市面上已经存在的大语言模型集合在一个仓库中,然后通过 ollama 的方式来管理这些大语言模型

下载

# 可以直接通过 http 的方式吧对应的 shell 脚本下载下来,然后执行即可
curl -fsSL https://ollama.com/install.sh | sh

配置为 Linux 的服务

把他配置一个服务的时候我们可以很方便的管理,并且允许他在后台运行,也可以允许他可以跟我们的系统一起启动

# /etc/systemd/system/ollama.service
[Unit]
Description=Ollama Service
After=network-online.target

[Service]
ExecStart=/l/ollama/bin/ollama serve
Restart=always

[Install]
WantedBy=default.target

启动

上面我们配置以后就可以直接使用 systemctl 来启动了 systemctl start ollama.service 启动成功以后,就可以使用 ollama 来管理了。

使用 ollama

他的使用也是和 docker 十分的类似,如果有 docker 的使用经验,那么如果上手使用 ollama 简直十分容易

下载一个模型
ollama run granite3-moe:1b

在这里插入图片描述

启动一个模型
ollama run granite3-moe:1b

启动成功以后就可以直接进去其中了,并且我们可以见到问他一些问题他可以回复我们。

在这里插入图片描述

删除一个模型
ollama rm qwen2.5:0.5b

在这里插入图片描述

查询我们安装的所有模型
ollama list

http://www.kler.cn/a/373527.html

相关文章:

  • 【Unity功能集】TextureShop纹理工坊(十三)打开、保存工程【TSD文件】(终章)
  • 详解 Docker 启动 Windows 容器第二篇:技术原理与未来发展方向
  • WINFORM - DevExpress -> gridcontrol拖拽行记录排序
  • RabbitMQ故障全解析:消费、消息及日常报错处理与集群修复
  • Android Room 报错:too many SQL variables (code 1 SQLITE_ERROR) 原因及解决方法
  • winform监听全局鼠标事件
  • Leetcode 79 Word search
  • 保障农民工工资!我们这么做:
  • 前端面试题-token的登录流程、JWT
  • Django+Vue智慧分析居家养老系统统的设计与实现
  • 【Vulnhub靶场】DC-5
  • 构建旋转变换矩阵对二维到高维空间的线段点进行旋转
  • 微信小程序app.js里面onLaunch里面的函数比page里面的onshow里面的方法后执行
  • 接口表笔记
  • SchooWeb2--基于课堂学习到的知识点2
  • java基础面试题三异常处理
  • 技术总结(十七)
  • 什么是成品系统源码,哪里有成品源码,成品源码二次开发需要多久?
  • 小白学大模型:斯坦福CS25 Transformers与LLMs
  • QT 周期性的杀死一个进程(软件),一分钟后自动退出
  • Android View
  • 已解决sqlalchemy.exc.OperationalError: (pymssql._pymssql.OperationalError) (18456
  • 代码随想录算法训练营第十二天| 226.翻转二叉树、101. 对称二叉树、104.二叉树的最大深度 、111.二叉树的最小深度
  • java的字符串比较
  • Google map根据半径创建虚线边框的圆
  • Vision - 视觉分割开源算法 SAM2(Segment Anything 2) 配置与推理 教程 (1)