主機(jī)回來(lái)以及,簡(jiǎn)單的環(huán)境配置(RTX3070+CUDA11.1+CUDNN+TensorRT)

緊接著前幾天的事:

之后,決定買一臺(tái)整機(jī)玩玩。

而現(xiàn)在,主機(jī)終于回!來(lái)!了!主機(jī)回來(lái)干什么,當(dāng)然是——配置環(huán)境。

老潘之前也有一些配置環(huán)境的文章,可以參考:

-_-|| 沒(méi)想到那會(huì)寫了這么多配置環(huán)境的文章,可能那會(huì)遇到的問(wèn)題比較多吧...配環(huán)境什么的,其實(shí)只要嚴(yán)格按照步驟來(lái)一步一步配,基本上不會(huì)出現(xiàn)什么問(wèn)題,出現(xiàn)問(wèn)題一般都是我們某一步?jīng)]有走對(duì),而退回去再走比較麻煩而已。

而現(xiàn)在對(duì)于配環(huán)境來(lái)說(shuō)可以是輕車熟路了(前幾年不知道踩了多少坑,到現(xiàn)在都印象深刻),嚴(yán)格按照步驟來(lái),安裝Ubuntu和配置深度學(xué)習(xí)環(huán)境,1個(gè)小時(shí)多就搞定了。

你懂得

接下來(lái)略微詳細(xì)地講一下過(guò)程。

  • Windows下安裝Ubuntu-18.04
  • 配置深度學(xué)習(xí)環(huán)境(Cuda+Cudnn+Pytorch+TensorRT)

主機(jī)長(zhǎng)這樣

先放一組圖吧。

主機(jī)正面
躺下的主機(jī)
微星魔龍RTX3070正面
背部引線以及電源
插上顯卡的主機(jī)
晚上開(kāi)機(jī)長(zhǎng)這樣

晚上開(kāi)機(jī)還挺炫的,但其實(shí)對(duì)于老潘來(lái)說(shuō)炫不炫不重要,性能好就行...

主機(jī)配環(huán)境

主機(jī)回來(lái)店家只給我裝了Windows系統(tǒng),對(duì)于老潘來(lái)說(shuō),打游戲是次要的(哈哈哈哈...),忍住了先下載一個(gè)鬼泣5玩玩的想法。先從Ubuntu官方下載了官方的鏡像包。

官方最新的Ubuntu是20.10,但對(duì)于搞事的人來(lái)說(shuō),還是18.04版本好一些(之前實(shí)驗(yàn)室用的是16.04)。

還是下載穩(wěn)定版的吧

開(kāi)始配置雙系統(tǒng),雙系統(tǒng)是必須的,Ubuntu可以搞深度學(xué)習(xí),也可以當(dāng)服務(wù)器使,Windows則可以應(yīng)付一些游戲和其他應(yīng)急應(yīng)用。

關(guān)于如何將下載好的Ubuntu系統(tǒng)鏡像制作成U盤、如何安裝,老潘這里不贅述了。可以看以下這篇文章,介紹的很詳細(xì),我就是按照這個(gè)嚴(yán)格來(lái)執(zhí)行的:

當(dāng)然如果有問(wèn)題歡迎交流,直接留言即可~

安裝過(guò)程

雖然不贅述了,但還是簡(jiǎn)單過(guò)一下:

進(jìn)入BIOS,選擇Ubuntu啟動(dòng)U盤,然后開(kāi)始安裝Ubuntu:

其他一路點(diǎn)點(diǎn)點(diǎn),然后簡(jiǎn)單分個(gè)區(qū)。

ubuntu分區(qū)

然后開(kāi)始安裝...

安裝ubuntu

等待半小時(shí),裝好了!

設(shè)置SSH

為什么要設(shè)置ssh,當(dāng)然是想讓這個(gè)Ubuntu充當(dāng)一個(gè)服務(wù)器的作用,開(kāi)啟之后可以使用ssh登錄去操作。

例如我,可以先把服務(wù)器開(kāi)了,然后使用其他電腦,例如MAC,使用局域網(wǎng)通過(guò)SSH連接這個(gè)服務(wù)器即可。

怎么開(kāi)啟ssh呢?新的Ubuntu系統(tǒng)還沒(méi)有安裝SSH。

執(zhí)行以下命令:

sudo apt install openssh-server
sudo systemctl start ssh.service

然后可以通過(guò)netstat -lnp | grep 22查看下開(kāi)啟沒(méi)。

如果想要每次啟動(dòng)自動(dòng)開(kāi)啟SSH,可以這樣:

sudo systemctl enable ssh

這樣就差不多啦。

安裝NVIDIA顯卡驅(qū)動(dòng)

默認(rèn)Ubuntu安裝的是llvmpipe這個(gè)顯卡驅(qū)動(dòng),這個(gè)是linux下的公用顯卡驅(qū)動(dòng),現(xiàn)在需要換成NVIDIA的。

首先禁用nouveau

執(zhí)行sudo gedit /etc/modprobe.d/blacklist.conf

加上以下這兩句:

blacklist nouveau
options nouveau modest=0
禁用noueavu

保存后,然后執(zhí)行:

sudo updata-initramfs -u
sudo reboot

重啟后,Ctrl+Alt+F1切換到tty界面,關(guān)閉lightdm(如果沒(méi)有則不用管):

sudo service lightdm stop

然后更新一下apt源以及看一下系統(tǒng)推薦的NVIDIA驅(qū)動(dòng)版本:

sudo add-apt-repository ppa:graphics-drivers/ppa
sudo apt-get update
ubuntu-drivers devices

根據(jù)推薦的驅(qū)動(dòng)版本,安裝NVIDIA驅(qū)動(dòng):

sudo apt-get install nvidia-driver-460

如果嫌慢,可以添加阿里或者清華源:

sudo cp /etc/apt/sources.list /etc/apt/sources.list.bcakup
sudo gedit /etc/apt/sources.list

備份之后打開(kāi)文件,添加以下源即可:

# 阿里云源
deb http://mirrors.aliyun.com/ubuntu/ bionic main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ bionic-security main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ bionic-updates main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ bionic-backports main restricted universe multiverse
##測(cè)試版源
deb http://mirrors.aliyun.com/ubuntu/ bionic-proposed main restricted universe multiverse
# 源碼
deb-src http://mirrors.aliyun.com/ubuntu/ bionic main restricted universe multiverse
deb-src http://mirrors.aliyun.com/ubuntu/ bionic-security main restricted universe multiverse
deb-src http://mirrors.aliyun.com/ubuntu/ bionic-updates main restricted universe multiverse
deb-src http://mirrors.aliyun.com/ubuntu/ bionic-backports main restricted universe multiverse
##測(cè)試版源
deb-src http://mirrors.aliyun.com/ubuntu/ bionic-proposed main restricted universe multiverse


# 清華大學(xué)源
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic main restricted universe multiverse
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-security main restricted universe multiverse
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-updates main restricted universe multiverse
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-backports main restricted universe multiverse
##測(cè)試版源
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-proposed main restricted universe multiverse
# 源碼
deb-src http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic main restricted universe multiverse
deb-src http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-security main restricted universe multiverse
deb-src http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-updates main restricted universe multiverse
deb-src http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-backports main restricted universe multiverse
##測(cè)試版源
deb-src http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-proposed main restricted universe multiverse

別忘了添加之后,進(jìn)行更新二連:

sudo apt-get update
sudo apt-get upgrade

這樣就可以順利的安裝NVIDIA驅(qū)動(dòng)了。

然后下載好以下三個(gè)深度學(xué)習(xí)伴侶

cuda+TensorRT環(huán)境包

開(kāi)始安裝吧!

安裝Cuda、Cudnn

Cuda當(dāng)然是必須要裝的。

找到下載好的11.1cuda環(huán)境包(現(xiàn)在出來(lái)11.2了),然后執(zhí)行:

sudo sh cuda_11.1.0_455.23.05_linux.run

會(huì)出來(lái)一堆blabla的選項(xiàng):

  • 1、確保你環(huán)境里頭是否有舊的cuda,有的話建議刪除
  • 2、同意條款..
  • 3、確認(rèn)是否要安裝驅(qū)動(dòng)、安裝demo...以及安裝位置確定
  • 4、開(kāi)始安裝ing

對(duì)于老潘來(lái)說(shuō),上一步中已經(jīng)安裝了cuda驅(qū)動(dòng),不需要再裝舊版的(新版驅(qū)動(dòng)兼容舊版驅(qū)動(dòng)匹配的cuda),所以這里就把驅(qū)動(dòng)選項(xiàng)去掉,其他的安裝按照我的需求按部就班來(lái)就好。

cuda安裝選項(xiàng)

注意
如果你沒(méi)有root權(quán)限,無(wú)法使用sudo,想要安裝cuda也是可以的。只要自定義好安裝位置即可,運(yùn)行如下命令即可將cuda安裝到當(dāng)前home下的software文件夾內(nèi):

./cuda_11.1.0_455.23.05_linux.run --silent --toolkit --toolkitpath=$HOME/software/cuda --defaultroot=$HOME/software/cuda

不論咋樣安裝好之后會(huì)顯示:

安裝好cuda的顯示

按照上面的要求配置環(huán)境變量即可:

(base) oldpan@oldpan-fun:~/software$ vim ~/.bashrc  

將
export PATH=/usr/local/cuda-11.1/bin:$PATH
export LD_LIBRARY_PATH=/usr/local/cuda-11.1/lib64:$LD_LIBRARY_PATH
添加到打開(kāi)的文件中

(base) oldpan@oldpan-fun:~/software$ source ~/.bashrc
(base) oldpan@oldpan-fun:~/software$ nvcc -V
nvcc: NVIDIA (R) Cuda compiler driver
Copyright (c) 2005-2020 NVIDIA Corporation
Built on Tue_Sep_15_19:10:02_PDT_2020
Cuda compilation tools, release 11.1, V11.1.74
Build cuda_11.1.TC455_06.29069683_0

Cudnn

cudnn的安裝就比較簡(jiǎn)單了,解決壓縮包然后復(fù)制粘貼就行:

tar -xzvf cudnn-11.2-linux-x64-v8.1.1.33.tgz
sudo cp cuda/include/cudnn.h /usr/local/cuda/include
sudo cp cuda/lib64/libcudnn* /usr/local/cuda/lib64
sudo chmod a+r /usr/local/cuda/include/cudnn.h

安裝Anaconda

安裝Anaconda也很簡(jiǎn)單,從這里下載好(不想下的看老潘整理文末的軟件包):

然后sh Anaconda3-2020.11-Linux-x86_64.sh就行。

安裝好之后,配置conda以及pip清華源,參考以下文字即可:

安裝Pytorch

安裝Pytorch就比較簡(jiǎn)單了,如果不想自己編譯,直接從官方按照你的Cuda版本和Cudnn版本安裝即可:

https://download.pytorch.org/whl/torch_stable.html

安裝好Pytorch之后,測(cè)試一下cuda是否工作正常:

>>> import torch
>>> torch.cuda.is_available()
True
>>> torch.ones(1).cuda()
tensor([1.], device='cuda:0')
>>> torch.cudnn_is_acceptable(torch.ones(1).cuda())
True

OK~

TensorRT

TensorRT單獨(dú)發(fā)一篇文章來(lái)說(shuō)吧~

一些資源

配環(huán)境需要很多軟件包,例如:

  • Anaconda
  • Pytorch.whl
  • TensorRT
  • CUDA
  • CUDNN

有些可以在清華大學(xué)開(kāi)源軟件鏡像站下載,但是TensorRT和CUDA、CUDNN需要從官方下而且需要注冊(cè)而且很慢。

老潘整理了一些已經(jīng)下載好的軟件包。

公眾號(hào)內(nèi)回復(fù)015獲取,可以看看有沒(méi)有你需要的:

軟件包

想寫的還有很多,下篇再講(呼呼)。

如果有問(wèn)題歡迎留言,歡迎關(guān)注「oldpan博客」公眾號(hào),老潘的全部家當(dāng)都在這里了。很愿意與你交朋友~

參考

https://www.cnblogs.com/masbay/p/10745170.html
https://blog.csdn.net/ZPeng_CSDN/article/details/96726436

撩我吧

  • 如果你與我志同道合于此,老潘很愿意與你交流;
  • 如果你喜歡老潘的內(nèi)容,歡迎關(guān)注和支持。
  • 如果你喜歡我的文章,希望點(diǎn)贊?? 收藏 ?? 評(píng)論 ?? 三連一下~

想知道老潘是如何學(xué)習(xí)踩坑的,想與我交流問(wèn)題~請(qǐng)關(guān)注公眾號(hào)「oldpan博客」。
老潘也會(huì)整理一些自己的私藏,希望能幫助到大家,點(diǎn)擊神秘傳送門獲取。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 230,106評(píng)論 6 542
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 99,441評(píng)論 3 429
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人,你說(shuō)我怎么就攤上這事。” “怎么了?”我有些...
    開(kāi)封第一講書人閱讀 178,211評(píng)論 0 383
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我,道長(zhǎng),這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書人閱讀 63,736評(píng)論 1 317
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 72,475評(píng)論 6 412
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書人閱讀 55,834評(píng)論 1 328
  • 那天,我揣著相機(jī)與錄音,去河邊找鬼。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,829評(píng)論 3 446
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書人閱讀 43,009評(píng)論 0 290
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 49,559評(píng)論 1 335
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 41,306評(píng)論 3 358
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 43,516評(píng)論 1 374
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 39,038評(píng)論 5 363
  • 正文 年R本政府宣布,位于F島的核電站,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 44,728評(píng)論 3 348
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書人閱讀 35,132評(píng)論 0 28
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書人閱讀 36,443評(píng)論 1 295
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 52,249評(píng)論 3 399
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 48,484評(píng)論 2 379

推薦閱讀更多精彩內(nèi)容