首页 > 其他分享 >腾讯云GPU服务器环境部署与连接配置

腾讯云GPU服务器环境部署与连接配置

时间:2023-01-22 10:02:28浏览次数:41  
标签:home 博主 -- conda 服务器 腾讯 GPU 安装 ubuntu


先前博主购买了腾讯云的GPU服务器后,发现上面预装的环境存在一些问题,因此便来重新部署一下。
为了操作方便,博主这里使用了一个远程控制端软件:Xshell
博主在初始化时已经安装过pytorch了,我们首先看看安装的路径

测试环境

import torch
print(torch.__file__)

腾讯云GPU服务器环境部署与连接配置_服务器

修改源

这时博主也发现系统帮我们安装了minconda3,相较于anconda,其体积更小。我们在控制台输入​​conda​​测试一下,出现下面界面说明是正常的

腾讯云GPU服务器环境部署与连接配置_python_02


添加清华源镜像,让其安装依赖包速度快些

conda config --add channels http://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main
conda config --add channels http://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/r
conda config --add channels http://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/msys2

#显示检索路径
conda config --set show_channel_urls yes

#显示镜像通道
conda config --show channels

在配置时会提示没有权限

CondaError: Cannot write to condarc file at /home/ubuntu/.condarc
Caused by PermissionError(13, ‘Permission denied’)

修改一下:

sudo chown -R ubuntu /home/ubuntu/.condarc

ubuntu是用户名,后面是路径
然后我们再次运行:一切正常

腾讯云GPU服务器环境部署与连接配置_服务器_03


这时我们像之前在window那样创建anconda环境即可

创建环境与安装pytorch

conda create -n yolo python=3.8

此时报错:

NoWritableEnvsDirError: No writeable envs directories configured.
- /home/ubuntu/.conda/envs
- /usr/local/miniconda3/envs

这是没有写入权限造成的,修改一下:

sudo chmod a+w .conda

再次创建环境:成功

腾讯云GPU服务器环境部署与连接配置_ubuntu_04

查看安装的环境:

腾讯云GPU服务器环境部署与连接配置_腾讯云_05


激活环境:​​source activate yolo​

腾讯云GPU服务器环境部署与连接配置_腾讯云_06


根据cuda版本为11.4安装对应的pytorch

腾讯云GPU服务器环境部署与连接配置_ubuntu_07

conda install pytorch==1.11.0 torchvision==0.12.0 torchaudio==0.11.0 cudatoolkit=11.4 -c pytorch

运行却失败了,因此也只能使用原来的命令,安装成功

conda install pytorch==1.12.1 torchvision==0.13.1 torchaudio==0.12.1 cudatoolkit=11.3 -c pytorch

pycharm远程连接

我们再次在pycharm中配置

腾讯云GPU服务器环境部署与连接配置_ubuntu_08


可以看到所需的依赖都加载完成了。

再次运行还是有问题

sudo+ssh://[email protected]:22/home/ubuntu/.conda/envs/yolo/bin/python3.8 -u /home/ubuntu/pythonfile/train.py
/home/ubuntu/.conda/envs/yolo/bin/python3.8: can't open file '/home/ubuntu/pythonfile/train.py': [Errno 2] No such file or directory

该问题是没有将本地代码映射到服务器上导致的,在网上找相关资料,配置了很久,看到说可能与映射路径相关,来来回回搞了很多次,发现在本地新建的文件是可以写入的,但先前的文件却无法写入。这说明我们的目录配置是没有问题的。
然后重新上传一下,整个项目右击

腾讯云GPU服务器环境部署与连接配置_ubuntu_09

然后等着,这个过程会很漫长,慢慢来。博主晚上导入的,早晨醒过来搞定了

腾讯云GPU服务器环境部署与连接配置_腾讯云_10

此时我们可以看到,项目已经映射到服务器上了,此时我们再次运行一下:

腾讯云GPU服务器环境部署与连接配置_腾讯云_11

提示我们缺少包了,我们只需要将所需要的包配置好即可了。

添加依赖包

sudo apt-get install python3-matplotlib

腾讯云GPU服务器环境部署与连接配置_服务器_12

当然也可以使用pip install matplotlib命令或者使用pycharm中安装。

腾讯云GPU服务器环境部署与连接配置_腾讯云_13


腾讯云GPU服务器环境部署与连接配置_腾讯云_14

OK了

腾讯云GPU服务器环境部署与连接配置_python_15


查看一下利用率

腾讯云GPU服务器环境部署与连接配置_腾讯云_16

不得不说比博主笔记本的性能强太多了。
奈斯
最终,项目大约训练了4个小时便完成了,相较博主原本的笔记本快了不知多少倍,而且每次运行时风扇的呼呼声以及由于系统cpu,内存的占用而导致无法完成其他的事情,可以说真的非常棒,比起之前在谷歌白嫖的colab速度也快了不少,记得当时博主运行12小时也没完成,想必虽然两者是相同的显卡,但后者cpu的调用竞争激烈造成了一些瓶颈。


标签:home,博主,--,conda,服务器,腾讯,GPU,安装,ubuntu
From: https://blog.51cto.com/u_15876949/6021429

相关文章

  • “阿贝云”"免费虚拟主机"“免费云服务器”
    “阿贝云(https://www.abeiyun.com/)”"免费虚拟主机"“免费云服务器”,体验不错。最主要的还是免费使用。推荐大家使用。.虽然我用的是1核心1G的配置,但用起来还可以,不卡机......
  • 解决vue部署到服务器请求接口404问题
    解决vue部署到服务器请求接口404问题:https://blog.csdn.net/weixin_44692055/article/details/103693859?utm_medium=distribute.pc_relevant.none-task-blog-2~default~ba......
  • 服务器租用如何选租用前要厘清的
    服务器租用如何选租用前要厘清的很多企业都了解服务器租用的优势,但是对于现在市场上琳琅满目的IDC服务商,不知如何选择,因为每一个IDC服务商的资质都是不同的,而要......
  • 解决IDEA数据服务器已连接,Schemas中不显示数据库
    今天连数据库服务器发现问题一个,不知道是不是IDEA的BUG,明明数据库已经连上了,测试成功,但是Schemas中就是刷新不出来数据库。解决办法,原数据连接复制了一下,在点开Schemas就......
  • 未备案域名解析至腾讯云服务器就直接封停?腾讯云的蜜汁操作让人无语
    按监管要求中国服务器绑定域名务必得到工信部备案,如果把未备案的域名解析到国内服务器上那么就会阻断访问。昨日发现自己的腾讯云服务器遭受封停,封停原因是别人将未备案的......
  • SRS流媒体服务器——SRS4.0 WebRTC一对一通话环境搭建与逻辑分析
    目录环境搭建SRS4.0WebRTC1对1通话逻辑分析环境搭建1.安装go语⾔环境在Go语言官网找到对应的安装包(https://golang.google.cn/dl/)下载和解析(使用的是阿里云的Ub......
  • 使用ansible部署主从DNS服务器
    很早之前访问网络资源可以使用IP地址,为了降低用户访问网络资源的门槛,域名系统(DomainNameSystem,DNS)技术应运而生。这是一项用于管理和解析域名与IP地址对应关系的技术。本......
  • 登录服务器的软件-WinSCP 和 Xshell
    在登录服务器的时候,可以使用Linux系统,比如虚拟机下的Centos7和子系统Ubuntu。连接方式为:[email protected](需要用户名,端口,地址)。在Windows系统下,如......
  • GPU基础
    CPU基本架构与GPU基本架构SharedMemory(SM):共享内存,不是缓存SpecialFunctionUnits(SFU):特殊功能单元,超越运算(sin,cos)和插值。MTIssue:Multithreadingissuingunit......
  • 工作中与服务器打交道的爱恨情仇
    jmap 可以用来分析程序的大对象, jstack 可以分析程序中的一些让cpu飙高和内存占用飙高的线程及代码块, jstat 配合参数 -gc 可以分析当前程序的垃圾收集情况,包括......