將深度學(xué)習(xí)網(wǎng)絡(luò)訓(xùn)練任務(wù)搬到云端，這些坑你遇到了嗎？
在進(jìn)行深度學(xué)習(xí)，特別是神經(jīng)網(wǎng)絡(luò)訓(xùn)練時(shí)，我們可以將其視為一場對技術(shù)裝備的深深考驗(yàn)，而精心打造的GPU服務(wù)器則是這一征途中的得力助手。然而，自建GPU服務(wù)器的高昂費(fèi)用及移動性限制，使得許多人望而卻步。本文將為您詳細(xì)介紹如何在阿里云平臺上構(gòu)建一臺高效的GPU服務(wù)器，并解決遠(yuǎn)程訪問的難題。
選擇合適的GPU服務(wù)器
ssh root@47.93.*.*#輸入自己的公網(wǎng)IPThe authenticity of host '47.93.*.* (47.93.*.*)' can't be established.
ECDSA key fingerprint is SHA256:r60avP7Lyz01MRTFN9mbekDAcwZWv8tFUmMlo6dr/m0.
Are you sure you want to continue connecting (yes/no)? Warning: Permanently added '47.93.*.*' (ECDSA) to the list of known hosts.
選購阿里云GPU服務(wù)器如同探尋云端瑰寶。首先，需精選適合的地理位置，類似挖掘福地。之后，擇優(yōu)選取實(shí)例配置，建議應(yīng)用異構(gòu)計(jì)算及GPU計(jì)算功能；鏡像市場深度學(xué)習(xí)版則類似璞玉精琢，預(yù)裝顯卡驅(qū)動與cuda8.0，免除額外困擾。
root@47.93.*.*'s password: 在購買Linux系統(tǒng)過程中，確實(shí)有諸多細(xì)瑣環(huán)節(jié)值得留意。譬如創(chuàng)建密碼之際，其獨(dú)特的操作方式如同參與一場莊重的傳統(tǒng)儀式般神秘。在輸入密碼的過程中，屏幕上并無任何字符顯現(xiàn)，僅需輕按回車，便可成功設(shè)定密碼。
Welcome to Ubuntu 16.04.2 LTS (GNU/Linux 4.4.0-62-generic x86_64)
* Documentation: https://help.ubuntu.com
* Management: https://landscape.canonical.com
* Support: https://ubuntu.com/advantage
Welcome to Alibaba Cloud Elastic Compute Service !
vim /etc/hostname#ubantu的在此目錄下，其他系統(tǒng)按需更改vim /etc/hosts鏡像選擇的智慧
127.0.0.1 localhost
127.0.0.1 bamboo_aliyun #新增
# The following lines are desirable for IPv6 capable hosts
::1 localhost ip6-localhost ip6-loopback
ff02::1 ip6-allnodes
ff02::2 ip6-allrouterssudo: unable to resolve host iZ2ze3v1xxtg5z3w2nb8oaZ
在鏡像市場的汪洋大海中，數(shù)以百計(jì)的胚芽映入眼簾，而那些已經(jīng)安裝好驅(qū)動程式及CUDA8.0的模版則更顯珍貴，就如同一張深藏在茫茫大海中的藏寶圖。遺憾的是，如果選擇了沒有事先做好這些準(zhǔn)備的模版，那麼，在安裝過程中將會遭遇無盡的困難與時(shí)間消耗，讓人啼笑皆非。
root@GPU_aliyun:~# ls
deep_learning nvidia NVIDIA_CUDA-8.0_Samplesexit#推出SSH登錄安全組的守護(hù)
sudo adduser bambooroot@GPU_aliyun:~# sudo adduser bamboo
Adding user `bamboo' ...
Adding new group `bamboo' (1000) ...
Adding new user `bamboo' (1000) with group `bamboo' ...
Creating home directory `/home/bamboo' ...
Copying files from `/etc/skel' ...
Enter new UNIX password:
Retype new UNIX password:
passwd: password updated successfully
Changing the user information for bamboo
Enter the new value, or press ENTER for the default
Full Name []: bamboo
Room Number []:
Work Phone []:
Home Phone []:
Other []:
Is the information correct? [Y/n] y
安全組猶如堅(jiān)固的防線，保護(hù)著您的服務(wù)器穩(wěn)定運(yùn)行。盡管當(dāng)前采用默認(rèn)配置已足夠應(yīng)對需求，后續(xù)我們將深入探討更為精細(xì)化的設(shè)定方案。須知，若您的服務(wù)器運(yùn)行狀況良好，卻無法實(shí)現(xiàn)遠(yuǎn)程訪問，那么極有可能是由于安全組規(guī)則配置不當(dāng)所致。
bamboo@bamboo-WorkBook:~$ ssh bamboo@39.106.143.143sudo vim /etc/sudoers文件夾權(quán)限的重要性
bamboo is not in the sudoers file. This incident will be reported.調(diào)整文件夾權(quán)限猶如給服務(wù)器披上強(qiáng)大的防護(hù)裝甲。若不實(shí)施該措施，裝載應(yīng)用程序常會遭遇棘手狀況。賦與SHELL權(quán)限更顯關(guān)鍵，尤其對初次接觸系統(tǒng)者而言，路徑無法正常顯示、Tab鍵失靈均可得到有效解決。
bamboo@GPU_aliyun:~$ sudo chmod -R 777 /home/bamboo/sudo useradd -g root bamboo
遠(yuǎn)程訪問的迷霧
sudo passwd bamboo
就遠(yuǎn)程訪問問題而言，仿若迷霧之燈塔，導(dǎo)引正確航向。如已知網(wǎng)絡(luò)功能正常卻無法實(shí)現(xiàn)遠(yuǎn)程訪問，或許需排查安全組規(guī)則配置因素。借助云服務(wù)器管理平臺逐步調(diào)整相關(guān)規(guī)則，如同撥散迷霧，尋獲照亮航程的明燈。
usermod -s /bin/bash bambooconda環(huán)境的魔力
vim /etc/sudoers在Conda環(huán)境下進(jìn)行部署堪稱魔法般的快捷高效。它能自動裝配并調(diào)用相關(guān)依賴包，簡化操作流程之余，更為您的工作環(huán)境帶來井然有序的氛圍特征。
# User privilege specification
root ALL=(ALL:ALL) ALL
bamboo ALL=(ALL:ALL) ALL
自定義鏡像的便捷
vim /etc/passwdssh bamboo@47.93.*.*#輸入自己的公網(wǎng)IP自定義鏡像猶如神奇的符咒，助力您便捷地操控阿里云服務(wù)器，簡化應(yīng)用流程。創(chuàng)建完畢后務(wù)必釋放實(shí)例，以確保隨時(shí)隨地可喚醒服務(wù)器，盡享深度學(xué)習(xí)的無盡樂趣。
sudo chmod -R 777 /home/bamboo/文件上傳下載的快捷方式
運(yùn)用SCP進(jìn)行文件傳輸猶如翱翔于云端服務(wù)器與本地計(jì)算機(jī)之境，使您實(shí)現(xiàn)從云端自助訓(xùn)練至本地深度解析的工作流程，顯著提升工作效益。
git的強(qiáng)大助力
Git作為服務(wù)器端版本控制利器，如同私人顧問，助力您高效完成工作。未就服務(wù)器端Git設(shè)置進(jìn)行詳述，未來文章將探討之，旨在提供更優(yōu)質(zhì)服務(wù)。
sudo wget https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/Anaconda3-5.0.1-Linux-x86_64.sh在此神經(jīng)網(wǎng)絡(luò)訓(xùn)練的挑戰(zhàn)之旅中，除了充足的高性能GPU設(shè)施外，必須熟練掌握各類技術(shù)與策略。我期望能給那些朝氣蓬勃深耕于深度學(xué)習(xí)及機(jī)器學(xué)習(xí)領(lǐng)域的精英們提供有益的啟示，幫助他們避開險(xiǎn)途，更快抵達(dá)勝利的頂峰。
sudo bash Anaconda3-5.0.1-Linux-x86_64.sh最后，請各位討論一下在此期間或在服務(wù)器部署與遠(yuǎn)程訪問環(huán)節(jié)，是否遇到過令人困擾的難題？真誠期望各位能通過評論分享經(jīng)驗(yàn)，共同探討與學(xué)習(xí)。
In order to continue the installation process, please review the license
agreement.
Please, press ENTER to continue
Do you accept the license terms? [yes|no]Anaconda3 will now be installed into this location:
/home/bamboo/anaconda3
- Press ENTER to confirm the location
- Press CTRL-C to abort the installation
- Or specify a different location below作者：小藍(lán)
鏈接：http://www.huanchou.cn/content/1083.html
本站部分內(nèi)容和圖片來源網(wǎng)絡(luò)，不代表本站觀點(diǎn)，如有侵權(quán)，可聯(lián)系我方刪除。
