超算temp
vim
shell脚本编辑
软件安装
配置conda环境
目前有的环境(conda)
LLM----运行Qwen、Qwen1.5系列模型
GLM3----运行ChatGLM3模型
Baichuan----运行百川2系列模型
conda文件夹复制
直接将创建好的虚拟环境的文件夹复制到超算的anaconda的虚拟环境目录下
超算虚拟环境目录位置
/data/home/202331060205/.conda/envs
conda_txt迁移环境
- 迁移环境
一旦你准备好将环境迁移到有 NVIDIA GPU 的机器上,你有几个选项:
-
复制虚拟环境:你可以简单地将整个虚拟环境文件夹复制到目标机器上。然而,这种方法可能会因为不同操作系统或架构而遇到兼容性问题。
-
导出依赖列表:更可靠的方法是导出当前环境的依赖列表,然后在目标机器上重新创建虚拟环境并安装依赖。
-
使用 pip:
pip freeze > requirements.txt
-
使用 conda:
conda list --export > requirements.txt
-
-
在目标机器上,根据导出的
requirements.txt
文件重新创建虚拟环境并安装依赖。请确保在目标机器上安装了与模型兼容的 NVIDIA 驱动、CUDA Toolkit 和 cuDNN。
超算用户工作目录
/data/home/202331060205/perl5/NeverGpDzy/Qwen1.5-7bChat
/data/home/202331060205/DingZhiyu/NeverGpDzy/Baichuan2-13B-Chat
导入python_utf8环境变量
export PYTHONIOENCODING=utf8