Win10 WSL2 Ubuntu 22.04 配置深度学习环境

文章目录

  • WSL安装Anaconda
    • 下载Anaconda安装包
    • 安装
    • 配置conda命令
    • conda换国内源
    • conda初始化shell环境
      • conda init
      • 手动源激活脚本:
  • 安装Windows上的NVIDIA GPU驱动
  • WSL安装CUDA Toolkit
    • 安装12.1版本
    • 环境配置
    • 报错1
    • 报错2 内存不足导致安装崩溃
      • 问题描述
      • 问题分析
      • 问题解决
    • WSL2 Ubuntu安装NVIDIA cuDNN深度学习库
      • 官网下载
      • 安装步骤
      • 验证是否可以GPU加速
      • 卸载cudnn
    • WSL2 Ubuntu安装NVIDIA cuDNN深度学习库 2
    • pytorch安装
    • 安装libtorch
  • 参考


WSL安装Anaconda

下载Anaconda安装包

直接在wsl中执行wget命令即可。

 wget https://repo.anaconda.com/archive/Anaconda3-2024.02-1-Linux-x86_64.sh

安装

直接执行bash命令即可。

bash Anaconda3-2024.02-1-Linux-x86_64.sh

一路enter,遇到下面的提示

在这里插入图片描述

这里直接选择默认路径。

配置conda命令

安装完成之后输入conda命令,报错command not found。
在这里插入图片描述

这没有将anaconda的安装路径放入环境变量中,执行下面命令进行添加

vim ~/.bashrc
export PATH=$PATH:/root/anaconda3/bin # export PATH=$PATH:【你的安装目录】
source ~/.bashrc

测试
在这里插入图片描述

conda换国内源

conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/
conda config --set show_channel_urls yes

conda初始化shell环境

conda init

damon@damonmac:~$ conda init
no change     /home/damon/anaconda3/condabin/conda
no change     /home/damon/anaconda3/bin/conda
no change     /home/damon/anaconda3/bin/conda-env
no change     /home/damon/anaconda3/bin/activate
no change     /home/damon/anaconda3/bin/deactivate
no change     /home/damon/anaconda3/etc/profile.d/conda.sh
no change     /home/damon/anaconda3/etc/fish/conf.d/conda.fish
no change     /home/damon/anaconda3/shell/condabin/Conda.psm1
no change     /home/damon/anaconda3/shell/condabin/conda-hook.ps1
no change     /home/damon/anaconda3/lib/python3.11/site-packages/xontrib/conda.xsh
no change     /home/damon/anaconda3/etc/profile.d/conda.csh
no change     /home/damon/.bashrc
No action taken.
damon@damonmac:~$ conda activate baseCondaError: Run 'conda init' before 'conda activate'

即使运行了conda init,您的Conda环境仍然没有正确初始化。这种情况可能是因为conda init命令没有成功修改您的shell配置文件,或者修改没有生效。

手动源激活脚本:

在您的shell中手动执行Conda的激活脚本,看看是否可以解决问题。对于bash用户,您可以在终端运行:

source ~/anaconda3/etc/profile.d/conda.sh

然后尝试再次激活Conda环境:

conda activate base

在这里插入图片描述

检查.bashrc或其他Shell配置文件:

检查您的~/.bashrc文件,看看是否真的包含了初始化Conda的相关行。您应该在文件中找到类似这样的行:

# >>> conda initialize >>>
# !! Contents within this block are managed by 'conda init' !!
__conda_setup="$('/home/damon/anaconda3/bin/conda' 'shell.bash' 'hook' 2> /dev/null)"
if [ $? -eq 0 ]; theneval "$__conda_setup"
elseif [ -f "/home/damon/anaconda3/etc/profile.d/conda.sh" ]; then. "/home/damon/anaconda3/etc/profile.d/conda.sh"elseexport PATH="/home/damon/anaconda3/bin:$PATH"fi
fi
unset __conda_setup
# <<< conda initialize <<<

如果这些行不存在,您可以手动添加它们,然后保存并关闭文件,再运行:

source ~/.bashrc

安装Windows上的NVIDIA GPU驱动

作为一个虚拟机,WSL2居然可以访问到物理宿主机的GPU设备,博主之前还没听说过有哪家公司的虚拟机可以做到这一点。如果WSL2当真可以做到,并且性能可以接受的话,那真是科研党的福音!

WSL安装CUDA Toolkit

官方的教程地址

官方下载地址

安装12.1版本

CUDA Toolkit 12.1 Downloads
在这里插入图片描述

wget https://developer.download.nvidia.com/compute/cuda/repos/wsl-ubuntu/x86_64/cuda-wsl-ubuntu.pin
sudo mv cuda-wsl-ubuntu.pin /etc/apt/preferences.d/cuda-repository-pin-600
wget https://developer.download.nvidia.com/compute/cuda/12.1.0/local_installers/cuda-repo-wsl-ubuntu-12-1-local_12.1.0-1_amd64.deb
sudo dpkg -i cuda-repo-wsl-ubuntu-12-1-local_12.1.0-1_amd64.deb
sudo cp /var/cuda-repo-wsl-ubuntu-12-1-local/cuda-*-keyring.gpg /usr/share/keyrings/
sudo apt-get update
sudo apt-get -y install cuda

测试

在这里插入图片描述
安装完成后还需要进行环境配置。

环境配置

上述安装完成后,需更新 ~/.bashrc 文件

sudo vi ~/.bashrc

i 进入insert模式,添加以下代码到文件最后,注意修改为对应版本。

export PATH=/usr/local/cuda-12.1/bin${PATH:+:${PATH}}
export LD_LIBRARY_PATH=/usr/local/cuda-12.1/lib64:${LD_LIBRARY_PATH:+:${LD_LIBRARY_PATH}}

Esc, :wq,回车保存。

source ~/.bashrc

运行以下代码,输出如图则CUDA安装成功。

在这里插入图片描述

报错1

damon@damonmac:/opt$ sudo dpkg -i cuda-repo-wsl-ubuntu-12-1-local_12.1.0-1_amd64.deb
Selecting previously unselected package cuda-repo-wsl-ubuntu-12-1-local.
(Reading database ... 81755 files and directories currently installed.)
Preparing to unpack cuda-repo-wsl-ubuntu-12-1-local_12.1.0-1_amd64.deb ...
Unpacking cuda-repo-wsl-ubuntu-12-1-local (12.1.0-1) ...
Setting up cuda-repo-wsl-ubuntu-12-1-local (12.1.0-1) ...The public cuda-repo-wsl-ubuntu-12-1-local GPG key does not appear to be installed.
To install the key, run this command:
sudo cp /var/cuda-repo-wsl-ubuntu-12-1-local/cuda-F7B46061-keyring.gpg /usr/share/keyrings/damon@damonmac:/opt$

报错解决

报错信息表明,在为WSL(Windows Subsystem for Linux)安装的CUDA包安装过程中,需要验证包完整性的公共GPG密钥没有被安装。这可能会影响到将来的更新或者包的信任度。

以下是解决这个问题的步骤:

安装GPG密钥:错误信息中已经提供了一个命令,这个命令会将GPG密钥从CUDA包的安装目录复制到系统目录中,以便包管理系统使用这个密钥来验证CUDA包。在您的终端中运行以下命令:

sudo cp /var/cuda-repo-wsl-ubuntu-12-1-local/cuda-F7B46061-keyring.gpg /usr/share/keyrings/

更新包列表:安装密钥后,更新包列表是一个好主意,以确保所有的仓库都是最新的:

sudo apt update

然后重新安装即可。

报错2 内存不足导致安装崩溃

问题描述

wget https://developer.download.nvidia.com/compute/cuda/repos/wsl-ubuntu/x86_64/cuda-wsl-ubuntu.pin
sudo mv cuda-wsl-ubuntu.pin /etc/apt/preferences.d/cuda-repository-pin-600
wget https://developer.download.nvidia.com/compute/cuda/12.1.0/local_installers/cuda-repo-wsl-ubuntu-12-1-local_12.1.0-1_amd64.deb
sudo dpkg -i cuda-repo-wsl-ubuntu-12-1-local_12.1.0-1_amd64.deb
sudo cp /var/cuda-repo-wsl-ubuntu-12-1-local/cuda-*-keyring.gpg /usr/share/keyrings/
sudo apt-get update
sudo apt-get -y install cuda

在执行上述安装时,运行 “sudo apt-get -y install cuda”,出现wsl闪退情况。

问题分析

出现上述问题,可能有以下情况

  1. 系统资源不足:CUDA安装是一个资源密集型的过程,需要大量的内存和处理能力。如果系统资源(如RAM或CPU)不足,这可能导致系统过载和崩溃。
  2. 驱动程序冲突:CUDA安装涉及到显卡驱动,如果已安装的驱动与CUDA不兼容,或者驱动安装不正确,可能会引起系统稳定性问题。
  3. 硬件问题:某些硬件问题,如故障的内存条或不稳定的电源供应,可能在资源要求高的操作中显现出来。
  4. 软件冲突:系统中可能有其他软件或服务与CUDA安装过程中的某些步骤冲突,导致系统崩溃。
  5. 磁盘空间不足:如果您的系统磁盘空间不足,安装过程中可能会因为没有足够空间而失败,有时这也可能导致系统崩溃。

通过查看系统日志文件(‘/var/log/syslog’),发现是内存导致的崩溃。

下面是syslog日志中最后部分内容

...
May 10 14:04:35 damonmac systemd[445]: Stopped Sound Service.
May 10 14:04:35 damonmac systemd[445]: Starting Sound Service...
May 10 14:04:35 damonmac pulseaudio[478]: Failed to open PID file '/run/user/1000/pulse/pid': Too many levels of symbolic links
May 10 14:04:35 damonmac pulseaudio[478]: pa_pid_file_create() failed.
May 10 14:04:35 damonmac systemd[445]: pulseaudio.service: Main process exited, code=exited, status=1/FAILURE
May 10 14:04:35 damonmac systemd[445]: pulseaudio.service: Failed with result 'exit-code'.
May 10 14:04:35 damonmac systemd[445]: Failed to start Sound Service.
May 10 14:04:35 damonmac systemd[445]: pulseaudio.service: Scheduled restart job, restart counter is at 5.
May 10 14:04:35 damonmac systemd[445]: Stopped Sound Service.
May 10 14:04:35 damonmac systemd[445]: pulseaudio.service: Start request repeated too quickly.
May 10 14:04:35 damonmac systemd[445]: pulseaudio.service: Failed with result 'exit-code'.
May 10 14:04:35 damonmac systemd[445]: Failed to start Sound Service.
May 10 14:04:35 damonmac systemd[445]: pulseaudio.socket: Failed with result 'service-start-limit-hit'.
May 10 14:05:03 damonmac systemd[1]: systemd-timedated.service: Deactivated successfully.
May 10 14:05:19 damonmac kernel: [   48.978120] hv_balloon: Max. dynamic memory size: 16236 MB

问题解决

在WSL(Windows Subsystem for Linux)中使用Hyper-V的动态内存功能来调整内存使用,通常需要通过Windows的设置进行管理。以下是一些步骤和建议如何在WSL中调整虚拟内存:

调整Windows的Hyper-V设置

  • 打开Windows的“控制面板”。
  • 选择“程序和功能”,然后点击“启用或关闭Windows功能”。
  • 在弹出的窗口中找到并展开“Hyper-V”,确保相关的所有选项都被选中,特别是“Hyper-V管理工具”和“Hyper-V平台”。

在这里插入图片描述

在这里插入图片描述

使用WSL命令调整内存

WSL2 允许用户在.wslconfig文件中配置虚拟机的内存限制。这个文件位于您的Windows用户目录下(例如C:\Users\YourUsername.wslconfig)。
若没有此文件,可以创建或修改这个文件,并添加如下设置来调整内存:

[wsl2]
memory=16GB  # 设置WSL可用的最大内存

调整完毕后,保存文件并重启WSL(可以通过命令wsl --shutdown在Windows命令提示符中执行)

在这里插入图片描述

damon@damonmac:~$ free -mtotal        used        free      shared  buff/cache   available
Mem:           15848         550       14893           3         405       15036
Swap:           4096           0        4096
damon@damonmac:~$

重新安装,成功。


WSL2 Ubuntu安装NVIDIA cuDNN深度学习库

官网下载

cuDNN Downloads 默认安装最新的。

在这里插入图片描述

cuDNN Archive 在这里选择其他版本

安装步骤

下载cuDNN安装包

打开终端并使用wget命令下载cuDNN的Debian包:

wget https://developer.download.nvidia.com/compute/cudnn/9.1.1/local_installers/cudnn-local-repo-ubuntu2204-9.1.1_1.0-1_amd64.deb

安装下载的包

使用dpkg命令安装下载的Debian包:

sudo dpkg -i cudnn-local-repo-ubuntu2204-9.1.1_1.0-1_amd64.deb

安装GPG密钥

将cuDNN仓库的GPG密钥复制到系统的keyrings目录以便APT可以验证包的真实性:

sudo cp /var/cudnn-local-repo-ubuntu2204-9.1.1/cudnn-*-keyring.gpg /usr/share/keyrings/

更新软件源

更新APT的软件源,确保cuDNN的仓库已被包含:

sudo apt-get update

安装cuDNN

根据需要安装的CUDA版本,选择对应的cuDNN包进行安装:

对于CUDA 11

sudo apt-get -y install cudnn-cuda-11

对于CUDA 12

sudo apt-get -y install cudnn-cuda-12

验证是否可以GPU加速

pip3 install torch torchvision torchaudio
import torch
print(torch.cuda.is_available())

输出为 True 即表示 CUDA GPU 加速成功

卸载cudnn

sudo apt-get remove --autoremove libcudnn*sudo rm /usr/local/cuda/include/cudnn*.h
sudo rm /usr/local/cuda/lib64/libcudnn*

WSL2 Ubuntu安装NVIDIA cuDNN深度学习库 2

cuDNN Archive 下载tar压缩包
在这里插入图片描述

下载完成后执行如下命令安装

tar -xvf cudnn-linux-$arch-8.x.x.x_cudaX.Y-archive.tar.xz
sudo cp cudnn-*-archive/include/cudnn*.h /usr/local/cuda/include 
sudo cp -P cudnn-*-archive/lib/libcudnn* /usr/local/cuda/lib64 
sudo chmod a+r /usr/local/cuda/include/cudnn*.h /usr/local/cuda/lib64/libcudnn*

注意修改上述命令中的文件名,并替换x.x.x,X.Y为具体的版本号,如本文实际执行命令为:

tar -xvf cudnn-linux-x86_64-8.9.7.29_cuda12-archive.tar.xz
sudo cp cudnn-*-archive/include/cudnn*.h /usr/local/cuda/include 
sudo cp -P cudnn-*-archive/lib/libcudnn* /usr/local/cuda/lib64 
sudo chmod a+r /usr/local/cuda/include/cudnn*.h /usr/local/cuda/lib64/libcudnn*

pytorch安装

官网
在这里插入图片描述

pip3 install torch torchvision torchaudio

安装libtorch

在这里插入图片描述

https://download.pytorch.org/libtorch/cu121/libtorch-cxx11-abi-shared-with-deps-2.3.0%2Bcu121.zip

参考

WSL安装Anaconda

Win10自定义路径位置安装WSL2 (Ubuntu 20.04) 并配置CUDA

[yotroy.cool]WSL安装CUDA独显 PyTorch 深度学习环境配置,测速为什么要用WSL?

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/bicheng/10074.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

用docker 搭建 vscode for web

前言: 每当我们换机子或者是电脑内容不够的时候&#xff0c;总想着能用web方式使用某些软件&#xff0c;这样子&#xff0c;你无论何时何地都能愉快的开发了&#xff0c;今天来安排下使用容器技术去搭建vscode。 查找合适的Docker镜像 你可以使用官方的Code Server Docker镜像…

vue2人力资源项目6角色管理

elementUi编写表格样式及分页组件 <template><div class"container"><div class"app-container"><!--角色管理内容--><div class"role-operate"><el-button type"primary">添加角色</el-butt…

一键开启,盲盒小程序里的梦幻奇遇

在这个充满惊喜与未知的数字时代&#xff0c;盲盒小程序以其独特的魅力成为了许多人的新宠。只需一键开启&#xff0c;你就能踏入一个充满梦幻奇遇的世界&#xff0c;探索未知的惊喜与乐趣。 盲盒小程序不仅仅是一个简单的购物平台&#xff0c;它更是一个充满神秘与惊喜的宝藏库…

ETL中如何执行Python脚本

Python的解读 Python 是一种高级、通用的编程语言&#xff0c;由荷兰程序员吉多范罗苏姆&#xff08;Guido van Rossum&#xff09;于1990年代初设计并发布。Python的设计哲学强调代码的可读性和简洁性&#xff0c;它的语法清晰且表达力强&#xff0c;使得开发者能够以更少的代…

GT2512-STBA 三菱触摸屏12.1寸型

T2512-STBA参数说明&#xff1a;12.1"、SVGA 800*600、65536色、TFT彩色液晶显示屏、AC电源、32MB内存 三菱触摸屏GT2512-STBA性能规格详细说明&#xff1a; [显示部] 显示软元件&#xff1a;TFT彩色液晶显示屏 画面尺寸&#xff1a;12.1寸 分辨率&#xff1a;SVGA 80…

【Vue】Vue的核心

目录 计算属性-computed插值语法实现methods实现计算属性实现使用使用总结&#xff1a; 监视属性-watch监视的两种写法&#xff1a;深度监视备注&#xff1a; computed和watch之间的区别 绑定样式class样式绑定字符串写法数组写法对象写法 style样式绑定对象式1对象式2数组式 条…

Web数字孪生引擎

Web数字孪生引擎是指用于在Web上创建和运行数字孪生的软件平台。它们通常提供一组API和工具&#xff0c;用于连接到实时数据源、可视化数据并创建交互式体验。Web数字孪生引擎被广泛应用于各种应用&#xff0c;例如工业物联网、智能建筑、城市管理和公共安全等。北京木奇移动技…

Unable to locate the .NET SDK

问题描述&#xff1a; vs2019 加载项目时&#xff0c;提示如下&#xff1a; Unable to locate the .NET SDK as specified by global.json, please check that the specified version is installed. 项目中没有globan找al.json 文件 先使用&#xff1a; dotnet --list-sdks 命…

玩游戏专用远程控制软件

玩游戏专用远程控制软件&#xff1a;实现远程游戏的新体验 随着网络技术的不断发展和创新&#xff0c;远程控制软件已经逐渐渗透到我们生活的方方面面&#xff0c;尤其是在游戏领域。玩游戏专用远程控制软件&#xff0c;作为这一趋势下的产物&#xff0c;为玩家提供了全新的游…

杭州打的样,适合全国推广

房地产 昨天&#xff0c;杭州和西安全面解除房地产限购。 在房价跌跌不休的今天&#xff0c;这两大城市取消限购其实并不意外。 尤其是杭州&#xff0c;土地财政依赖全国第一&#xff0c;绷不住很正常。 近十年&#xff0c;杭州依靠于亚运会、G20 和阿里巴巴&#xff0c;涨得飞…

霍金《时间简史 A Brief History of Time》书后索引(E--H)

A–D部分见&#xff1a;霍金《时间简史 A Brief History of Time》书后索引&#xff08;A–D&#xff09; 图源&#xff1a;Wikipedia INDEX E Earth: circumference, motion, shape Eclipses Eddington, Arthur Einstein, Albert: biography, see also Relativity; Special…

RabbitMQ高级(MQ的问题,消息可靠性,死信交换机,惰性队列,MQ集群)【详解】

目录 一、MQ的问题 1. 问题说明 2. 准备代码环境 1 创建project 2 创建生产者模块 3 创建消费者模块 二、消息可靠性 1. 介绍 2. 生产者确认机制 3. MQ消息持久化 4. 消费者确认机制 5. 消费者auto模式的失败重试 6. 小结 三、死信交换机和延迟消息 1. 介绍 2. …

时间序列预测模型实战案例(三)(LSTM)(Python)(深度学习)时间序列预测(包括运行代码以及代码讲解)

目录 引言 LSTM的预测效果图 LSTM机制 了解LSTM的结构 忘记门 输入门 输出门 LSTM的变体 只有忘记门的LSTM单元 独立循环(IndRNN)单元 双向RNN结构(LSTM) 运行代码 代码讲解 引言 LSTM&#xff08;Long Short-Term Memory&#xff09;是一种常用的循环神经网络&a…

Android 如何启用user版本的adb源码分析

通过adb shell中执行getprop persist.sys.usb.config&#xff0c;可以看到系统usb的相关选项&#xff0c;persist.sys.usb.config显示的就是当前系统关于usb选项的系统配置【RK3188Android4.4刚移植的例子】: 全编脚本中make命令会调用build/core/main.mk,在里面可以看到一段…

安全工程师面试题

安全工程师面试题安全工程师是一个非常重要的职位&#xff0c;他们负责保护公司的网络和系统免受黑客和恶意软件的攻击。如果你想成为一名安全工程师&#xff0c;那么你需要准备好面试。下面是一… 1安全工程师面试题 安全工程师是一个非常重要的职位&#xff0c;他们负责保护…

图解HTTP(2、简单的 HTTP 协议)

HTTP 协议用于客户端和服务器端之间的通信 请求访问文本或图像等资源的一端称为客户端&#xff0c;而提供资源响应的一端称为服务器端。 通过请求和响应的交换达成通信 请求必定由客户端发出&#xff0c;而服务器端回复响应报文 请求报文是由请求方法、请求 URI、协议版本、…

鸿蒙HarmonyOS开发:List列表组件的使用详解及案例演示(二)

文章目录 一、List组件简介1、List组件2、ListItem组件3、ListItemGroup组件 二、使用ForEach渲染列表三、设置列表分割线四、设置List排列方向五、索引值计算规则六、示例演示1、AlphabetIndexer组件2、代码3、效果 一、List组件简介 在我们常用的手机应用中&#xff0c;经常…

SinoDB数据库导入导出工具External table

External table又叫SinoDB外部表&#xff0c;外部表采用多线程机制&#xff0c;支持多线程读取、写入数据文件以及多线程数据转换、插入操作。多线程机制只需要消耗相对较少的系统资源&#xff0c;但是能提供高速数据导入、导出&#xff0c;可以应用在数据采集、表重建、数据库…

OpenGL入门第四步:摄像机视角变换与交互

OpenGL入门第一步:创建窗口、重写虚函数-CSDN博客 OpenGL入门第二步:颜色、纹理设置(解析)-CSDN博客 OpenGL入门第三步:矩阵变换、坐标系统-CSDN博客 目录 函数解析 具体代码 函数解析 相机视角变换需要与鼠标键盘进行交互,需要重写鼠标和键盘响应函数。 初始化 …

【机器学习】 人工智能和机器学习辅助决策在空战中的未来选择

&#x1f680;传送门 &#x1f680;文章引言&#x1f512;技术层面&#x1f4d5;作战结构&#x1f308;替代决策选项&#x1f3ac;选项 1&#xff1a;超级战争&#xff08;Hyperwar&#xff09;&#x1f320;选项 2&#xff1a;超越OODA&#x1f302;选项 3&#xff1a;阻止其他…