快速搭建深度学习环境（Linux：miniconda+pytorch+jupyter notebook）

本文基于服务器端环境展开，使用的虚拟终端为Xshell。

miniconda

miniconda是Anaconda的轻量版，仅包含Conda和Python，如果只做深度学习，可使用miniconda。

[注]：Anaconda、Conda与Miniconda

  • Conda：创建和管理包的工具，支持创建和切换虚拟环境
  • Anaconda：集成了Conda、Python和科学包的发行版本，包含数理统计常用的包
  • Miniconda：仅包含Conda和Python

下载

1、切换到安装目录：默认安装在当前目录下

2、下载shell脚本

wget --user-agent="User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.9.2.12) Gecko/20101026 Firefox/3.6.12" -c https://mirrors.tuna.tsinghua.edu.cn/anaconda/miniconda/Miniconda3-latest-Linux-x86_64.sh
  • --user-agent：设置代理，以浏览器的身份请求，否则会反爬机制过滤导致数据包丢失。user-agent的介绍见这篇博文。
  • -c：断点续传。
  • Miniconda3-latest-Linux-x86_64.sh：待下载文件的名称
  • https://mirrors.tuna.tsinghua.edu.cn/anaconda/miniconda/：清华下载源
  • Miniconda3-latest-Linux-x86_64.sh：待下载文件的名称。可以访问清华下载源，根据系统环境选择合适的版本。系统的版本、架构等信息可通过uname -a命令查看。

命令执行完成后，通过ls进行确认。

安装

使用bash命令执行已下载的.sh文件进行安装。

bash Miniconda3-latest-Linux-x86_64.sh

命令执行过程中，根据提示操作即可（敲回车–>阅读协议–>输入yes同意协议–>输入安装路径–>输入yes进行初始化）。

激活

执行source ~/.bashrc命令或重新登录服务器。

行首出现(base)则表示激活成功。

可通过以下命令设置是否默认进入base环境：

#修改默认配置
conda config --set auto_activate_base false # 默认不进入base环境
conda config --set auto_activate_base true # 默认进入base环境

验证

执行命令conda --help，若打印指令说明则说明安装成功。

配置国内镜像源

1、查询配置文件所在路径：conda config --show-sources

2、更新配置文件，以下配置仅供参考（可能失效）

channels:- defaults
custom_channels:conda-forge: https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloudmsys2: https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloudbioconda: https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloudmenpo: https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloudpytorch: https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloudsimpleitk: https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud
default_channels:- https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main- https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/r- https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/msys2
show_channel_urls: True

Conda的基本操作

1、创建虚拟环境：conda create --name [env_name]

2、激活虚拟环境：conda activate [env_name]

3、退出环境：ctrl+D

4、查看环境列表：conda env list

5、查看当前环境中的包：conda list

6、导出环境配置为.yaml文件：conda env export > environment.yaml

7、通过.yaml文件安装相关依赖：conda env create -f environment.yaml

Pytorch

安装

1、查看驱动所支持的最高CUDA API版本版本：执行命令nvidia-smi，表格首行-“CUDA Version”

※如 CUDA Version: 12.6

若环境中安装了CUDA Toolkit或Anaconda，也可尝试这篇博文中的另外两种方法。

2、获取安装命令

  • 在这个页面的“INSTALL PYTORCH”一栏配置可选项（推荐使用pip安装）。

    ※Q：如何选择Compute Platform？

    答：可直接点选与CUDA Version最接近的选项。以下为本人习惯的做法，也可参考：

    • 在download.pytorch.org/whl/torch/检索与上一步骤中“CUDA Version”最接近的版本。

    • 替换下一步骤中下载链接的“cuxxx”

    如：当前版本为12.6，ctrl+F检索关键词“cu126”，发现没有匹配结果，那么继续尝试“cu125”、“cu124”以此类推。通过这个方法，可以得到当前最接近的版本为12.4，那么我们的下载命令就是：pip3 install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124

  • 复制生成的命令（在最后一行）

    pip3 install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124

3、安装：执行上述命令

若下载速度较慢，可尝试使用国内的PyPI下载源。以阿里云镜像为例：

  • 单次使用

    在上述命令末尾加上参数-i http://mirrors.aliyun.com/pypi/simple --trusted-host pypi.douban.com：

    pip3 install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu124 -i http://mirrors.aliyun.com/pypi/simple --trusted-host pypi.douban.com

验证

1、执行语句python，进入python命令行

2、依次执行以下语句：

import torch # 导入pytorch库
torch.cuda.is_available() # 如返回True，说明当前显卡可用

Jupyter Notebook

安装

若已安装Anaconda环境，可以跳过这一步。

注意⚠️

若希望将Jupyter的访问连接转移到XManager，请在启动Jupyter前确保XManager可以正常运行，且能被Xshell调起。

安装命令如下：

pip install jupyter

验证：jupyter notebook，若能启动，说明安装正常。

在本机浏览器访问使用

1、生成配置文件：jupyter notebook --generate-config

该命令会生成一个.py格式的配置文件，并返回文件的路径

2、设置jupyter的密码：jupyter notebook password

3、查看Hash密钥：vim ~/.jupyter/jupyter_server_config.json

4、修改步骤一生成的配置文件

c.ServerAPP.ip = '*' # 允许所有ip皆可访问
c.ServerAPP.password = 'argon2:$argon2id$v=xx$m=xxx,t=xxx,p=xxxxx' #步骤三的密钥
c.ServerAPP.open_browser = False # 禁止自动打开浏览器  
c.ServerAPP.port = 8888 # 设置运行端口  
c.ServerAPP.allow_remote_access  = True # 允许远程访问

在vim编辑器中查找配置项的方法：

  • 在查看模式输入/+查询内容+回车
  • 查找下一个结果：n键
  • 查找上一个结果：N键

5、在Xshell中配置SSH隧道

  • 在左侧会话列表右键当前会话，打开“属性”窗口
  • 在左侧“类别”一栏选择“连接-SSH-隧道”
  • 在“TCP/IP转移”栏添加一条规则，“侦听端口”和“目标端口”都填步骤四中配置的c.ServerAPP.port参数值，其它参数不用改
  • “X11转移”栏中，取消勾选“转发X11连接到”
  • 点击确定。此时设置不会生效，需要重新连接服务器

在这里插入图片描述

6、启动：jupyter notebook

该命令将启动notebook和Jupyterlab。

可以使用screen命令将Jupyter服务挂到后台执行，例如：

screen -S JupyterServer #创建并进入会话
jupyter notebook #启动。ctrl+D可以退出会话（进程将被挂起到后台运行）
screen -dr JupyterServer #恢复会话

7、访问：在本地浏览器中通过以下url访问

  • lab：http://127.0.0.1:port/lab
  • notebook：http://127.0.0.1:port/tree

port为步骤四的c.ServerAPP.port，password为步骤二中设置的密码

大功告成！

参考

  • Linux安装conda - 知乎
  • Ubuntu wget 403_安装ubuntu24.04服务器报403错误-CSDN博客
  • Index of /anaconda/archive/ | 清华大学开源软件镜像站 | Tsinghua Open Source Mirror
  • 【pip 安装】国内 pip 镜像源换源方法以及 pip 基本操作-CSDN博客
  • PyTorch
  • conda和pip安装流程、源配置、常用命令 | Anaconda 、Miniconda 和 conda 的区别 | conda和pip的区别_miniconda和conda的区别-CSDN博客
  • User-Agent代理的作用（最易懂！！）_user-agent的作用-CSDN博客
  • 远程linux服务器中安装jupyter通过本地浏览器访问使用_服务器jupyter 本地浏览器访问-CSDN博客

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rhkb.cn/news/4075.html

如若内容造成侵权/违法违规/事实不符，请联系长河编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

springboot医院信管系统

springboot医院信管系统

摘 要 随着信息技术和网络技术的飞速发展，人类已进入全新信息化时代，传统管理技术已无法高效，便捷地管理信息。为了迎合时代需求，优化管理效率，各种各样的管理系统应运而生，各行各业相继进入信息管理时代&a…
阅读更多...
《自动驾驶与机器人中的SLAM技术》ch8：基于预积分和图优化的紧耦合 LIO 系统

《自动驾驶与机器人中的SLAM技术》ch8：基于预积分和图优化的紧耦合 LIO 系统

和组合导航一样，也可以通过预积分 IMU 因子加上雷达残差来实现基于预积分和图优化的紧耦合 LIO 系统。一些现代的 Lidar SLAM 系统也采用了这种方式。相比滤波器方法来说，预积分因子可以更方便地整合到现有的优化框架中，从开发到实现都更为便…
阅读更多...
微信消息群发(定时群发)-UI自动化产品(基于.Net平台+C#)

微信消息群发(定时群发)-UI自动化产品(基于.Net平台+C#)

整理 | 小耕家的喵大仙 出品 | CSDN（ID：lichao19897314） 关联源码及工具下载https://download.csdn.net/download/lichao19897314/90096681https://download.csdn.net/download/lichao19897314/90096681https://download.csdn.net/download/…
阅读更多...
ESP8266-01S、手机、STM32连接

ESP8266-01S、手机、STM32连接

1、ESP8266-01S的工作原理 1.1、AP和STA ESP8266-01S为WIFI的透传模块，主要模式如下图： 上节说到，我们需要用到AT固件进行局域网应用（ESP8266连接的STM32和手机进行连接）。 ESP8266为一个WiFi透传模块，和…
阅读更多...
动手学大数据-3社区开源实践

动手学大数据-3社区开源实践

目录 数据库概览： MaxComput： HAWQ： Hologres： TiDB： Spark： ClickHouse： Apache Calcite 概览 Calcite RBO HepPlanner 优化规则（Rule） 内置有100优化规则 …
阅读更多...
WPS数据分析000004

WPS数据分析000004

目录 一、表格阅读技巧 冻结窗格 拆分窗口 新建窗口 阅读模式 护眼模式 二、表格打印技巧 打印预览 打印缩放 打印区域 打印标题 分页打印 打印位置 页眉页脚 逐份打印 三、表格保护技巧 锁定单元格 隐藏公式 文档权限 文件加密 一、表格阅读技巧 冻结窗…
阅读更多...
【Android】蓝牙电话HFP连接源码分析

【Android】蓝牙电话HFP连接源码分析

一、概述 在Android系统中，HF（Hands-Free Profile）客户端与AG（Audio Gateway）端之间的HFP（Hands-Free Profile）连接是蓝牙音频通信的重要组成部分。这一过程涉及多个层次和组件的协同工作&…
阅读更多...
Redisson发布订阅学习

Redisson发布订阅学习

介绍 Redisson 的消息订阅功能遵循 Redis 的发布/订阅模式，该模式包括以下几个核心概念： 发布者（Publisher）：发送消息到特定频道的客户端。在 Redis 中，这通过 PUBLISH 命令实现。 订阅者（Sub…
阅读更多...
【Linux 重装】Ubuntu 启动盘 U盘无法被识别，如何处理？

【Linux 重装】Ubuntu 启动盘 U盘无法被识别，如何处理？

背景 U盘烧录了 Ubuntu 系统作为启动盘，再次插入电脑后无法被识别 解决方案（Mac 适用） （1）查找 USB，（2）格式化（1）在 terminal 中通过 diskutil list 查看是…
阅读更多...
【LLM-RL】DeepSeekMath强化对齐之GRPO算法

【LLM-RL】DeepSeekMath强化对齐之GRPO算法

note 文章目录 note一、GRPOReference 一、GRPO 论文：DeepSeekMath: Pushing the Limits of Mathematical Reasoning in Open Language Models （https://arxiv.org/pdf/2402.03300）GRPO 在 DeepSeek V2 中采用了，GRPO 在训练过程…
阅读更多...
Rust Actix Web 项目实战教程 mysql redis swagger：构建用户管理系统

Rust Actix Web 项目实战教程 mysql redis swagger：构建用户管理系统

Rust Actix Web 项目实战教程：构建用户管理系统 项目概述 本教程将指导你使用 Rust 和 Actix Web 构建一个完整的用户管理系统，包括数据库交互、Redis 缓存和 Swagger UI 文档。 技术栈 Rust 编程语言Actix Web 框架SQLx (MySQL 数据库)Redis 缓存Uto…
阅读更多...
git系列之revert回滚

git系列之revert回滚

1. Git 使用cherry-pick“摘樱桃” step 1： 本地切到远程分支，对齐要对齐的base分支，举例子 localmap git pull git reset --hard localmap 对应的commit idstep 2： 执行cherry-pick命令 git cherry-pick abc123这样就会将远程…
阅读更多...
Hadoop•用Web UI查看Hadoop状态词频统计

Hadoop•用Web UI查看Hadoop状态词频统计

听说这里是目录哦 通过Web UI查看Hadoop运行状态🐇一、关闭防火墙二、在物理计算机添加集群的IP映射三、启动集群四、进入HDFS的Web UI 词频统计🦩1、准备文本数据2、在HDFS创建目录3、上传文件4、查看文件是否上传成功5、运行MapReduce程序6、查看MapRe…
阅读更多...
国产编辑器EverEdit -重复行

国产编辑器EverEdit -重复行

1 重复行 1.1 应用场景 在代码或文本编辑过程中， 经常需要快速复制当前行，比如，给对象的多个属性进行赋值。传统的做法是：选中行-> 复制-> 插入新行-> 粘贴，该操作有4个步骤，非常繁琐。 那有没…
阅读更多...
LabVIEW桥接传感器数据采集与校准程序

LabVIEW桥接传感器数据采集与校准程序

该程序设计用于采集来自桥接传感器的数据，执行必要的设置（如桥接配置、信号采集参数、时间与触发设置），并进行适当的标定和偏移校正，最终通过图表呈现采集到的数据信息。程序包括多个模块，用于配置通道、触…
阅读更多...
redis-排查命中率降低问题

redis-排查命中率降低问题

1.命中率降低带来的问题 高并发系统，当命中率低于平常的的运行情况，或者低于70%时，会产生2个影响。 有大量的请求需要查DB，加大DB的压力；影响redis自身的性能 不同的业务场景，阈值不一样，一般…
阅读更多...
edge浏览器恢复旧版滚动条

edge浏览器恢复旧版滚动条

1、地址栏输入edge://flags 2、搜索Fluent scrollbars.，选择disabled，重启即可
阅读更多...
【算法】算法基础课模板大全——第一篇

【算法】算法基础课模板大全——第一篇

由于本文章内容太长，导致文章不能以一篇博客形式发布出来，所以我将分为两篇博客进行发布。 【算法】算法基础课模板大全——第一篇 【算法】算法基础课模板大全——第二篇 此笔记适用于AcWing网站的算法基础课，所有的资源链接、代码模板全部来…
阅读更多...
Top期刊算法！RIME-CNN-BiLSTM-Attention系列四模型多变量时序预测

Top期刊算法！RIME-CNN-BiLSTM-Attention系列四模型多变量时序预测

Top期刊算法！RIME-CNN-BiLSTM-Attention系列四模型多变量时序预测 目录 Top期刊算法！RIME-CNN-BiLSTM-Attention系列四模型多变量时序预测预测效果基本介绍程序设计参考资料 预测效果 基本介绍 基于RIME-CNN-BiLSTM-Attention、CNN-BiLSTM-Attention、R…
阅读更多...
日志收集Day002

日志收集Day002

1.ES的常见术语 索引(index)： 用户写入ES集群的逻辑单元。 分片(shard): 一个索引最少一个分片。 将索引的数据分布式的存储在ES集群。 副本(replica): 一个分片可以有0个或多个副本。 为同一个分片数据提供数据冗余。 文档(docment): …
阅读更多...
最新文章
推荐文章

Copyright @ 2022~2023