跳到主要内容

超算temp

vim

Vim使用

shell脚本编辑

shell脚本编辑(上)

[shell脚本编辑(下)

软件安装

conda+module

从源文件编译

配置conda环境

目前有的环境(conda)

LLM----运行Qwen、Qwen1.5系列模型

GLM3----运行ChatGLM3模型

Baichuan----运行百川2系列模型

conda文件夹复制

直接将创建好的虚拟环境的文件夹复制到超算的anaconda的虚拟环境目录下

超算虚拟环境目录位置

/data/home/202331060205/.conda/envs

conda_txt迁移环境

  1. 迁移环境

一旦你准备好将环境迁移到有 NVIDIA GPU 的机器上,你有几个选项:

  • 复制虚拟环境:你可以简单地将整个虚拟环境文件夹复制到目标机器上。然而,这种方法可能会因为不同操作系统或架构而遇到兼容性问题。

  • 导出依赖列表:更可靠的方法是导出当前环境的依赖列表,然后在目标机器上重新创建虚拟环境并安装依赖。

    • 使用 pip:

      pip freeze > requirements.txt
    • 使用 conda:

      conda list --export > requirements.txt
  • 在目标机器上,根据导出的 requirements.txt 文件重新创建虚拟环境并安装依赖。请确保在目标机器上安装了与模型兼容的 NVIDIA 驱动、CUDA Toolkit 和 cuDNN。

超算用户工作目录

/data/home/202331060205/perl5/NeverGpDzy/Qwen1.5-7bChat
/data/home/202331060205/DingZhiyu/NeverGpDzy/Baichuan2-13B-Chat

导入python_utf8环境变量

export PYTHONIOENCODING=utf8