因为之前使用的更改colab环境是用了pyngrok, (详情参考:Colab 更换python版本) 之后在在conda里面创建虚拟环境的时候会有激活错误,所以直接用conda创建虚拟环境。在创建过程中遇到了一些之前没有接触过的操作,比如使用yml重现环境等,这里记录一下虚拟环境的创建过程,给自己做个备忘,也希望能帮助有同样需求或者问题的人。
但是需要注意的是,colab只能在terminal里面激活conda虚拟环境,在notebook中只能在某个代码格内使用虚拟环境后运行指令。每新增一个代码格,就要重新在代码格的开头声明一次激活环境。也就是说,在colab notebook中只能创建环境,无法激活环境。(虚拟环境只能在每个代码格里运行,不能激活一次后保证整个notebook都运行在虚拟环境下)
在styleGAN3官方文档里面给出了环境要求,要求python3.8及以上,pytorch1.9及以上,cudatoolkit11.1以上,1~8核N卡至少12G的显存。在GitHub里面官方给出了yml文件,可以方便用户直接运行并且重现环境。
安装anaconda# install Anaconda3 !wget -qO ac.sh https://repo.anaconda.com/archive/Anaconda3-2021.05-Linux-x86_64.sh !bash ./ac.sh -b
代码解释:
-wget 命令 记录和输入文件参数:
-o, –output-file=FILE 把记录写到FILE文件中
-a, –append-output=FILE 把记录追加到FILE文件中
-d, –debug 打印调试输出
-q, –quiet 安静模式(没有输出)
-v, –verbose 冗长模式(这是缺省设置)
-nv, –non-verbose 关掉冗长模式,但不是安静模式
-i, –input-file=FILE 下载在FILE文件中出现的URLs
-F, –force-html 把输入文件当作HTML格式文件对待
-B, –base=URL 将URL作为在-F -i参数指定的文件中出现的相对链接的前缀
Anaconda3-2021.05-Linux-x86_64.sh版本对应的anaconda版本号是4.10.1,对应py3.8版本。
创建py3.8库# a fake google.colab library
!ln -s /usr/local/lib/python3.7/dist-packages/google
/root/anaconda3/lib/python3.8/site-packages/google
代码解释:
ln命令:为某一个文件在另外一个位置建立一个同步的链接,这样在访问py3.8库的时候会等于访问colab自带的py3.7库,不用重复占用磁盘空间
写入路径import os os.environ['PATH'] = '/root/anaconda3/bin:' + os.environ['PATH']
import sys
_ = (sys.path
.append("/usr/local/lib/python3.8/site-packages"))
将python3.8的库也添加到路径中,输出结果可以看到最后一行已经新增完成了
在哪terminal中运行新增加的conda指令可能会遇到command cannot found的错误,这个时候需要修改bashrc文件
vim ~/.bashrc
在文件的最后添加anaconda3的安装路径
export PATH=$PATH:【你的安装目录】
之后source一下bashrc文件即可
确认python环境!python -V !conda info --env使用yml重现环境
从文章上面提到的GitHub官方文档处下载官方提供的yml文件,然后上传至colab, 在文件目录下运行代码
!conda env create -f environment.yml
运行过程会比较长,主要是cuda包和pytorch包比较大,运行时间大概是9mins
之后再检查就可以看到styleGAN3环境已经创建好了
!conda info --env激活新环境
关于激活环境,如果按照普通的conda指令会提示无法激活,只能在terminal里面通过以下代码激活styleGAN3环境。如果只用terminal运行代码的话到这里就完成了环境的配置。
!source activate !conda deactivate !conda activate stylegan3
关于如何在notebook上彻底激活conda环境还没有找到解决方法,在使用虚拟环境时需要用%%bash 来运行相应代码,即在每一个需要使用虚拟环境运行的指令前都添加%%bash然后更改运行环境,代码运行完成后,在下一个代码格内运行的代码将重新回到base环境。
%%bash
source activate stylegan3
conda env list
python
import sys
# some simple python commands
print(sys.path)
print("Python version")
print(sys.version)



