本文目錄一覽:
caffe python代碼怎麼用 gpu運行
編譯和安裝Caffe 。。。但我在編譯caffe時 輸入make all 指令時報錯 :提示找不到hdf5.h 我百度後 按照這個解決了。這樣make all 成功 make test也成功 make runtest也成功。 再開始其第3步:增加python支持這步 開始我看不清 就從這裡開始參考: 編譯python時: make pycaffe報錯:找不到arrayobject.h 解決辦法:sudo apt-get install python-numpy 這樣就解決了。這樣第3步的幾條指令均成功。再開始第4步 第4.2步報錯說:pip 找不到指令 於是我在終端輸入sudo apt-get install python-pip即解決了。 接著執行4.2步 第一個ipython[all]裝時失敗了 我就先裝後面的幾個 有的成功 有的失敗 失敗的是protobuf和skimage 解決辦法是:自己
使用集群運行你的python代碼
集群中有四台主機,master(無GPU),node01,node02,node03(GPU主機),直接運行 python main.py 程序將在CPU中運行。
如下步驟可以運行你的程序:
在你的文件目錄下新建一個 lsf.sh 文件,正文寫入:
其中 python main.py 是你運行程序的命令,然後:
source activate 你的conda環境
開啟環境,用
bsub lsf.sh 向集群提交運算任務。
即可運行程序,終端會給你一個任務序號,輸出文件就是 序號.out 和 序號.err 。
** 其他命令:**
bjobs -W 查看你的任務運行狀況
bhosts -gpu 查看集群GPU使用情況。
用GPU做python程序並行到底用什麼好
因為我的程序中需要並行的是優化計算的evaluation部分,所以如果能夠找到一些支持並行優化的庫就可以。 從python官網上,可以找到一個DEAP庫(git上有),利用map進行並行計算。 這個庫的優點是,documents和例子是非常詳細的。
原創文章,作者:小藍,如若轉載,請註明出處:https://www.506064.com/zh-tw/n/185923.html