conda迁移windows虚拟环境到linux
conda迁移windows虚拟环境到linux
近期使用python在windows下开发了一些算法,使用了conda来管理开发环境,准备迁移到linux下进行测试,Linux服务器在内网无法联网,迁移过程颇费周折,记录一下。
Conda是广为熟知的包管理器和虚拟环境管理器,有Anaconda,Miniconda两个版本,这里我使用的是Miniconda,安装过程略,安装好以后可以使用conda命令管理python软件包。
一、虚拟环境创建
在Windows下开发时,我使用conda创建了一个自己的虚拟环境,命令如下:
conda create --name test python=3.10
这里我创建了一个名称为test的虚拟环境,使用时需激活环境
conda activate test
最好将conda安装源配置成清华源
#查看镜像源
conda config --show channels
#删除添加源,恢复默认源
conda config --remove-key channels
#添加镜像源
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/r
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/pro
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/msys2
#终端显示包从哪个channel下载,以及下载地址是什么
conda config --set show_channel_urls yes
之后就可以用conda install安装各种需要的依赖包
二、导出导入虚拟环境
导出conda虚拟环境有两种方法,方法一只适用于相同的操作系统间导入导出环境
1、方法一是使用conda pack命令打包整个目录
# 需要先安装打包工具
conda install -c conda-forge conda-pack # 如果安装不了,就去掉-c conda-forge
# 将环境打包,默认放在C盘用户目录,可以通过在环境名前加路径修改位置
conda pack -n test -o test.tar.gz
将test.tar.gz传到新电脑上,解压缩到miniconda安装目录下的envs目录下test文件夹中
cd c:\path\miniconda3\envs\test
tar -xzvf your_out_env.tar.gz
在新电脑激活环境,则可使用了
conda info list # 查看是否存在了新的环境
conda activate test
以上方法测试只能在相同的系统之间迁移环境包,无法实现将windows虚拟环境到linux中
2.方法一是通过conda export命令导出
进入test虚拟环境后,在conda命令行中执行
conda env export --no-build > test.yaml
这里有一个坑,网上给出的参数都是-no-build,正确参数应该是–no-build
得到test.yaml文件后,传送至一台能联网的Linux服务器,我这里使用的是本地安装的WSL系统Ubuntu22.04.3
Ubuntu22.04.3安装miniconda过程略,在linux下的conda命令行中输入,创建虚拟环境
conda env create -f /path/test.yaml
创建过程中会出现错误,则需要编辑test.yaml文件,删除掉一些在windows下的依赖项目
我这里删除了,以下两个依赖项
- vc=14.40
- vs2015_runtime=14.40.33807
另外在创建环境过程中,会调用pip安装一些扩展依赖,pip安装过程中如果出来网络超时,可设置pip安装源为国内源:
pip config set global.index-url https://pypi.tuna.tsinghua.edu.cn/simple
如果pip安装过程中出现其他问题,需要查询错误解决,再修改test.yaml配置文件,将miniconda3\envs\test 目录删除,重新导入,直到成功.有一些类库实在linux下不支持的,或者需要调整版本,我在导入过程中就删除了两个linux不支持的类库,如下:
- pywin32==306
- pywinpty==2.0.13
在完成以上步骤后,再通过方法一,使用conda pack命令打包整个目录的形式,再导入到无法联网的Linux服务上,进行测试