过程记录python环境离线迁移

Posted zstar-_

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了过程记录python环境离线迁移相关的知识,希望对你有一定的参考价值。

前言

工作环境的电脑因特殊原因无法联网,因此在上面直接安装依赖就比较麻烦。本篇就简单来记录一下实现本地环境迁移的流程。

方式选择

离线迁移大致上有三种方式。

方式一:直接拷贝

Anaconda虚拟环境的安装依赖会统一存放在site-packages文件夹下,因此对于一些普通包可以直接进行拷贝。不过拷贝时需要注意需要将原始包和dist-info两个文件夹同时进行拷贝,否则pip list会无法索引到。

不过该方法问题在于有些包并不是按这个格式排布,无法直接进行操作。

方式二:手动下载安装包

如果只需要安装类似numpy、scipy这种简单的基础库,只需要下载.whl或者Github上的源文件就可以简单进行安装。
但是如果遇到的是一些复杂库,其安装过程中需要联网去下载一些其它依赖,并且依赖还很多,依赖的安装还有更多的依赖,这种情况手动下载就比较麻烦了。

方式三:批量下载安装包

查阅相关资料,发现pip可以根据requirements.txt文件批量下载安装包,因此本次就采用这一种方法。

打包requirements.txt

打包requirements.txt的方式在我之前的博文【目标检测】Flask+Docker在服务器部署YOLOv5应用提到过,最好是利用pipreqs的方式进行打包。

pipreqs . --encoding=utf8 --force

打包完成之后,需要手动对文件内容进行一定修改,包括但不限于删除setuptools(新环境一般自带setuptools),根据不同的系统修改torch版本等。

修改完成之后,将requirements.txt拷贝到一个新建的文件夹中,在文件夹中批量下载依赖。

pip download -r requirements.txt

注意我使用的python版本为3.8.0,使用python3.7会报错。

离线安装

下载完之后,将整个文件夹拷贝到新机子上,在新环境中执行:

pip install --no-index --find-links="." -r requirements.txt

没报错就代表安装完成。

报错解决

在此次过程中,我使用Anaconda创建一个python3.8的新环境时,输入pip list,发现报错

no module named pywin32_bootstrap

国内网站能查到的解决方法清一色是安装225版本的pywin32

pip install pywin32==225

然而实测并没有什么卵用。

后在stackoverflow找到解决方案,输入:

pip install --ignore-installed pywin32 --user

再次输入pip list,不再报错。

以上是关于过程记录python环境离线迁移的主要内容,如果未能解决你的问题,请参考以下文章

python使用pip离线安装库

保姆级教程Anaconda环境迁移:直接将之前搭建好的环境从一个机子迁移到另一个机子

断网环境,Python环境迁移

linux离线配置运行环境

Redis Cluster 4.0高可用集群安装在线迁移操作记录

过程记录ssh配置免密登录/anaconda环境迁移/gcc_g++安装切换