欢迎光临散文网 会员登陆 & 注册

转载:在linux中使用A卡进行ai模型训练

2022-10-23 05:10 作者:吃包子的死神  | 我要投稿

原文链接:https://blog.csdn.net/qq_44948500/article/details/127346390

原作者:XiaozhouTAT

前言:由于之前在视频中引用的文章,原作者做了一些修改,现在视频引用部分和文章的内容有些许差异,为了不让看视频学习安装NovelAI的朋友们迷惑,我把之前保存的离线网页的内容转载到这里。

吐槽

rocm都更新这么多版本了怎么还没有windows的

使用的设备配置

linux:Ubuntu20.04
CPU:R9-5900hx
GPU:RX6800M 12G
python:3.10.6

安装GPU驱动

如果你已经安装成功了gpu驱动可以跳过
如果之前装过其它版本没有驱动成功的,在终端输入
sudo amdgpu-install --uninstall卸载驱动

访问amd官网下载 amdgpu-install_xxxxxx.xxxxxx_all.deb

https://www.amd.com/en/support/kb/release-notes/rn-amdgpu-unified-linux-22-20

进入安装包所在的目录
接着在终端输入:sudo apt install ./amdgpu-install_xxxxxxx-xxxxxx_all.deb(注:amdgpu-install_xxxxxxx-xxxxxx_all.deb指的是你下载的amdgpu版本

然后sudo apt updatesudo apt upgrade -y


开始安装驱动

sudo amdgpu-install --usecase=dkms

amdgpu-install -y --usecase=rocm

//安装完后重启

sudo reboot


测试

# 显示gpu性能监控

rocm-smi


配置环境

ls -l /dev/dri/render*

sudo usermod -a -G render $LOGNAME

sudo usermod -a -G video $LOGNAME

sudo reboot


rocm-llvm依赖python但无法安装它

找个目录进行操作

apt download rocm-llvm

ar x rocm-llvm_xxxx.xxxxx_amd64.deb

tar xf control.tar.xz

#编辑文件,如果没有vim将先安装sudo apt install vim

vim control

#找到如下一行:

Depends: python, libc6, libstdc++6|libstdc++8, libstdc++-5-dev|libstdc++-7-dev, libgcc-5-dev|libgcc-7-dev, rocm-core

#改为如下内容:

Depends: python3, libc6, libstdc++6|libstdc++8, libstdc++-5-dev|libstdc++-7-dev|libstdc++-10-dev, libgcc-5-dev|libgcc-7-dev|libgcc-10-dev, rocm-core

#重新打包

tar c postinst prerm control | xz -c > control.tar.xz

ar rcs rocm-llvm.deb debian-binary control.tar.xz data.tar.xz

#安装前先安装依赖

sudo apt install libstdc++-10-dev libgcc-10-dev rocm-core

#安装

sudo dpkg -i rocm-llvm.deb

#重新安装驱动

sudo amdgpu-install


rocm-gdb依赖libpython3.8解决

进软件和更新——其他软件——添加下面软件源

deb https://ppa.launchpadcontent.net/deadsnakes/ppa/ubuntu jammy main

更新一下软件源

sudo apt upgrade

sudo apt update

安装libpython3.8并重新运行amdgpu-install

sudo apt install libpython3.8

sudo amdgpu-install



安装pytorch

(此命令是完整的一行,看起来两行是因为自动换行)

pip install torch torchvision torchaudio --extra-index-url https://download.pytorch.org/whl/rocm5.1.1


安装MIopen

//安装hip

apt-get install miopen-hip

运行stable-diffusion-webui

git clone https://github.com/AUTOMATIC1111/stable-diffusion-webui

cd stable-diffusion-webui

python -m pip install --upgrade pip wheel

HSA_OVERRIDE_GFX_VERSION=10.3.0 python launch.py --precision full --no-half

//一般来讲会提示没有模型,如果有扔./models/Stable-diffusion里,本文不提供,自行百度


提示cuda错误,解决方法

#打开launch.py找到这句代码

commandline_args = os.environ.get('COMMANDLINE_ARGS', "")

#改成

commandline_args = os.environ.get('COMMANDLINE_ARGS', "--skip-torch-cuda-test")


愉快玩耍

进webui目录执行以下操作


HSA_OVERRIDE_GFX_VERSION=10.3.0 python launch.py --precision full --no-half


如果运行时出现什么hip错误找不到gfx1030还三其他版号的可以不用管,等待一会将可以了,后面生成就不会提示,(每次启动第一次运行都会这样)


转载:在linux中使用A卡进行ai模型训练的评论 (共 条)

分享到微博请遵守国家法律