DL Machine系列-03 Docker

前言

網路上關於Docker的資訊已經有很多了,這邊就不多作介紹了,只針對幾個常用和在我的實作上有用到的指令和套件去做介紹。

用一張圖來簡單的說明Docker的架構:

繼續閱讀

DL Machine系列-02 建立LVM管理儲存空間

前言

這台硬碟上裝了5顆硬碟(2顆2.5’ SSD、2顆3.5’ HDD、1顆m.2 SSD),因為我們實驗室處理的資料量都頗大,動不動就500GB-1TB,如果單純地根據硬碟分開儲存的話,可能會浪費很多剩餘空間,而且在跑資料的時候可能會產生其他資料,這又導致不能預先切割硬碟來符合檔案大小(而且很麻煩),為了方便合理的利用所有硬碟空間,我決定將硬碟整合起來一起管理。

繼續閱讀

DL Machine系列-00 環境建置

前言

有鑒於每次實驗架設環境都花很多時間,也常常遇到版本更新後某些套件不相容的問題,所以才打算使用Docker來架設深度學習的虛擬環境(絕對不是因為覺得用Docker很帥才用的),說到深度學習就不得不使用GPU,使用GPU就不得不用nvidia-docker來架設環境,剛剛好本人的實驗室目前有一台電腦正空閒下來,也剛剛好多出一張RTX 2070S,想說利用Docker來一勞永逸這個問題,也順便試試看多GPU的環境是什麼樣的感覺。

繼續閱讀