【科研入门】搭建与配置云服务器的论文环境

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
检索分析服务 Elasticsearch 版,2核4GB开发者规格 1个月
大数据开发治理平台 DataWorks,不限时长
简介: 本文介绍了如何搭建云服务器并配置论文代码环境,以AutoDL平台为例。首先,租用服务器并选择符合代码需求的镜像版本,如Python 3.7、TensorFlow 1.15和PyTorch。接着,启动服务器进入终端,克隆项目代码并使用Conda创建隔离的环境安装所需包。如果需在Pycharm中工作,还需在Pycharm内创建相同环境。最后,根据项目配置安装Tensorflow和PyTorch,遇到缺失包时通过`pip install`补充。完成配置后,可克隆服务器以备后续使用。遇到版本不兼容问题,可调整Conda环境的Python版本。

2000元阿里云代金券免费领取,2核4G云服务器仅664元/3年,新老用户都有优惠,立即抢购>>>


阿里云采购季(云主机223元/3年)活动入口:请点击进入>>>,


阿里云学生服务器(9.5元/月)购买入口:请点击进入>>>,

如何搭建云服务器并且配置基础论文代码环境?

image.png
image.png

@TOC

前言

此次环境配置以AutoDL为例(可以选用其他服务器租用平台),主要是针对论文配置基本环境(Pytorch、Tensorflow、Conda...)

一、租用服务器并选定基础配置

  1. 打开AutoDL,注册后先进行充值,便于租用服务器(第一次充值可以充值5-10元)

  2. 进入算力市场,点击1卡可租
    image.png

  1. 根据代码要求,选定镜像版本

image.png

具体建议
  • Python:考虑使用Python 3.7,这些版本提供了更好的特性和性能改进,同时保持较好的库兼容性。
  • TensorFlow:由于论文指定了TensorFlow版本小于2.0,建议选择TensorFlow 1.15,这是1.x系列中的最后一个并且是长期支持的版本。
  • PyTorch:可以选择使用PyTorch的较新版本,例如1.8或1.9,除非有特定的库或代码依赖于更旧的版本。

二、容器初始化

  1. 开机并进入终端

在容器实例中给容器开机,并点击JupyterLab进入该机器的终端
image.png

  1. 克隆项目

在GitHub对应的论文网址下,找到Code下对应的论文路径。
image.png

通过git clone的方式将项目克隆到目录下,对AutoDL来说,该目录一般是/root/autodl-tmp下为项目新建的子目录。

git clone https://github.com/ma-compbio/Hyper-SAGNN.git /root/autodl-tmp/Hyper-SAGNN/
  1. 配置Conda环境
  • 为每个项目创建一个新的Conda环境,并在Conda环境下配置该项目所需要的包,是一种推荐的做法。

    • 隔离依赖:避免项目之间的依赖发生冲突

    • 依赖管理:Conda能更好地处理包之间的依赖关系

    • Conda安装:Conda主要安装预编译的二进制包,这通常比从源代码编译安装(pip install)会更好。

  • 命令
conda create -n Hyper python=3.7 // 创建一个Python版本为3.7的名为"Hyper"的Conda环境
source activate Hyper //激活Conda环境
conda install tensorflow-gpu==1.15 // Conda二进制安装对应版本的包
conda list

pip install tensorflow-gpu==1.15
pip list
  • 配置环境之后,只要激活环境之后就进入了Conda环境之中。

4.如果需要在Pycharm里面打开项目的话,建议在也在Pycharm的Conda环境下搭建一个虚拟环境。

  • python -V检查当前的Python版本
    image.png

  • 输入conda create -n pytorch python=3.7在anaconda中创建一个python版本为3.9的虚拟环境pytorch。(环境名可自拟,python根据自己所需版本选择)若想移除环境,可用conda remove -n pytorch --all。
    image.png

输入y
image.png

出现以下信息表示创建成功。
image.png

  • 输入conda env list,可以看到我们创建的虚拟环境pytorch。

image.png

  • 在base环境中输入conda activate pytorch进入pytorch环境,在pytorch环境中输入conda deactivate退出pytorch环境。
    image.png

  • 进入pytorch环境,输入“conda install + 库名” 添加库。
    image.png

安装完成后,记得选用Scripts下面的可执行文件和Pytorch虚拟环境
image.png

三、项目的具体配置

  1. 大型配置(先装确定的)
    image.png

确定的部分就是Requirements下的一些明确的配置。

由于我们在创建Conda环境的时候就为该环境指定了Python的版本,那么我们只需要安装Tensorflow和Pytorch。

// Tensorflow
pip install tensorflow-gpu == 1.15

// Pytorch
pip3 install --pre torch torchvision torchaudio --index-url https://download.pytorch.org/whl/nightly/cu113 // 使安装的 PyTorch 将能够利用安装在系统上的 CUDA 11.3 版本来执行 GPU 加速的运算
pip install torch==1.12.1+cu113 torchvision==0.13.1+cu113 torchaudio==0.12.1 --extra-index-url https://download.pytorch.org/whl/cu113 // 安装GPU torch
  1. 小型配置(缺啥补啥)
    image.png

找到论文中运行的代码,在启动Conda环境后运行,如果运行后还缺少某些指令或者包,则再进行安装。

image.png

像图中例子,如果缺genism,再通过pip install去安装缺的部分。

四、克隆

在配置完毕并成功运行代码后,如果我们不需要用了,关机后我们需要将配置好的机器克隆成多个。因为释放资源后原机器可能被抢占,所以我们通过克隆,看哪个克隆的机器闲置我们就去用相应的机器,节省时间。

image.png

将机器关机后,点击更多,选择克隆实例,勾选数据盘,创建出新的实例。

五、常见问题

  • 如果出现版本过低无法安装的情况,需要适当降低Conda环境的Python版本
// 直接在重新创建的命令后更改成一个较低的版本
conda create -n Hyper python=3.7

image.png

相关实践学习
一小时快速掌握 SQL 语法
本实验带您学习SQL的基础语法,快速入门SQL。
7天玩转云服务器
云服务器ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,可降低 IT 成本,提升运维效率。本课程手把手带你了解ECS、掌握基本操作、动手实操快照管理、镜像管理等。了解产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
5天前
|
消息中间件 安全 Linux
服务器(Linux)在线下载activeMQ以及配置打开
服务器(Linux)在线下载activeMQ以及配置打开
14 3
|
5天前
|
XML 网络安全 开发工具
如何下载并安装 SAP ABAPGit,并完成 ABAP 服务器上 SSL 证书的配置试读版
如何下载并安装 SAP ABAPGit,并完成 ABAP 服务器上 SSL 证书的配置试读版
11 0
|
5天前
|
Web App开发 安全 Unix
Linux 配置FTP服务器 + vsftpd服务安装配置 (Good篇)
Linux 配置FTP服务器 + vsftpd服务安装配置 (Good篇)
|
5天前
|
存储 弹性计算 固态存储
阿里云服务器租用价格参考,2核16G、4核32G、8核64G配置收费标准
阿里云服务器2核16G、4核32G、8核64G配置最新租用价格更新,2024年阿里云产品再一次降价,降价之后2核16G配置按量收费最低收费标准为0.596元/小时,按月租用标准收费标准为260.44元/1个月。4核32G配置的阿里云服务器按量收费标准最低为1.085元/小时,按月租用标准收费标准为520.88元/1个月。8核64G配置的阿里云服务器按量收费标准最低为2.17元/小时,按月租用标准收费标准为1041.77元/1个月。云服务器实例规格的地域和实例规格不同,收费标准不一样,下面是2024年阿里云服务器2核16G、4核32G、8核64G配置的最新租用收费标准。
阿里云服务器租用价格参考,2核16G、4核32G、8核64G配置收费标准
|
5天前
|
存储 弹性计算 固态存储
阿里云服务器配置选择指南,2024年全解析
阿里云服务器配置选择涉及CPU、内存、带宽和磁盘。个人开发者或中小企业推荐使用轻量应用服务器或ECS经济型实例,如2核2G3M配置,适合网站和轻量应用。企业用户则应选择企业级独享型ECS,如计算型c7、通用型g7,至少2核4G起,带宽建议5M,系统盘考虑SSD云盘或ESSD云盘以保证性能。阿里云提供了多种实例类型和配置,用户需根据实际需求进行选择。
|
5天前
|
弹性计算 运维 监控
解密阿里云弹性计算:探索云服务器ECS的核心功能
阿里云ECS是核心计算服务,提供弹性云服务器资源,支持实例按需配置、集群管理和监控,集成安全防护,确保服务稳定、安全,助力高效业务运营。
89 0
|
3天前
|
弹性计算 运维 安全
阿里云ecs使用体验
整了台服务器部署项目上线
|
5天前
|
弹性计算
阿里云ECS的使用心得
本文主要讲述了我是如何了解到ECS,使用ECS的一些经验,以及自己的感悟心得
|
5天前
|
弹性计算
阿里云ECS使用体验
在申请高校学生免费体验阿里云ECS云服务器后的一些使用体验和感受。
|
5天前
|
存储 弹性计算 固态存储
阿里云服务器租用价格参考,云服务器收费标准与实时活动价格整理
阿里云服务器租用价格参考,本文更新了阿里云服务器最新的租赁费用,包括云服务器实时的活动价格与云服务器收费标准。经济型e实例云服务器4核16G10M带宽配置30.00元/1个月、90.00元/3个月,独享型通用算力型u1实例2核4G服务器仅需199元1年,轻量云服务器2核2G新用户专享价格61元/1年,计算型c7a实例2核4G配置特惠价625.68元/1年。更多阿里云服务器热门配置活动价格及云服务器租赁费用及活动价格见下文。
阿里云服务器租用价格参考,云服务器收费标准与实时活动价格整理
http://www.vxiaotou.com