包含gpu与python的词条

本文目录一览：

1、caffe python代码怎么用 gpu运行
2、使用集群运行你的python代码
3、使用python在GPU上构建和训练卷积神经网络
4、python对电脑显卡要求
5、python要学习多久？

caffe python代码怎么用 gpu运行

编译和安装Caffe 。。。但我在编译caffe时输入make all 指令时报错：提示找不到hdf5.h 我百度后按照这个解决了。这样make all 成功 make test也成功 make runtest也成功。再开始其第3步：增加python支持这步开始我看不清就从这里开始参考：编译python时： make pycaffe报错：找不到arrayobject.h 解决办法：sudo apt-get install python-numpy 这样就解决了。这样第3步的几条指令均成功。再开始第4步第4.2步报错说:pip 找不到指令于是我在终端输入sudo apt-get install python-pip即解决了。接着执行4.2步第一个ipython[all]装时失败了我就先装后面的几个有的成功有的失败失败的是protobuf和skimage 解决办法是：自己

使用集群运行你的python代码

集群中有四台主机，master（无GPU），node01,node02,node03(GPU主机)，直接运行 python main.py 程序将在CPU中运行。

如下步骤可以运行你的程序：

在你的文件目录下新建一个 lsf.sh 文件，正文写入：

其中 python main.py 是你运行程序的命令，然后:

source activate 你的conda环境

开启环境，用

bsub lsf.sh 向集群提交运算任务。

即可运行程序，终端会给你一个任务序号，输出文件就是序号.out 和序号.err 。

** 其他命令：**

bjobs -W 查看你的任务运行状况

bhosts -gpu 查看集群GPU使用情况。

使用python在GPU上构建和训练卷积神经网络

我将对代码进行补充演练，以构建在数据集上训练的任何类型的图像分类器。在这个例子中，我将使用花卉数据集，其中包括102种不同类型的花。需要数据集和代码都可以私信我。

Pytorch是机器学习和Python上的免费软件包，非常易于使用。语法模拟numpy，因此，如果你在python中有一些科学计算经验，那么会相当有用的。只需几行代码，就可以下载预先训练的数据集，使用定义的变换对图像进行标准化，然后运行训练。

创建和扩充数据集

为了增加数据集，我使用’ google_images_download’API 从互联网上下载了相关图像。显然，您可以使用此API不仅可以扩充现有数据集，还可以从头开始创建自己的数据集。

确保从图像中挑选出异常值(损坏的文件或偶然出现的无关图像)。

图像标准化

为了使图像具有相同的大小和像素变化，可以使用pytorch的transfors模块：

转移学习

从头开始训练的模型可能不是最明智的选择，因为有许多网络可用于各种数据集。简单地说，像edge-和其他简单形状检测器等低级特征对于不同的模型是相似的，即使clasificators是针对不同目的进行训练的。在本项目中，我使用了一个预训练网络Resnet152，只有最后一个完全连接的层重新用于新任务，即使这样也会产生相当好的效果。

在这里，我将除最后一层之外的所有层都设置为具有固定权重（requires_grad = False），因此只有最后层中的参数将通过梯度下降进行更新。

训练模型

下面介绍一下进行训练的函数：

如何获得GPU？

当然，对CPU的训练太慢了。根据我自己的经验，在GPU仅需要一个小时就可以完成12次训练周期，但是在CPU上相同数量的训练周期可能需要花费大约15个小时。

如果您没有本地可用的GPU，则可以考虑使用云GPU。为了加速CNN的训练，我使用了floydhub（）上提供的云GPU 。

这项服务非常指的使用：总有很好的文档和大量的提示，所以你会很清楚的知道下一步需要如何去做。在floydhub上对于使用GPU的收费也是可以接受的。

首先，需要将数据集上传到服务器

然后，需要创建项目。需要在计算机上安装floydhub客户端，将数据集上载到其网站并在终端中运行以下命令：

其中’username’是您的登录名，’i’是数据集所在的文件夹。

这样子在训练网络时就会很轻松了

结果和改进想法

得到的模型在数据集上训练了1.5小时，并在验证数据集上达到了95％的准确度。

python对电脑显卡要求

一般情况下对显卡无明显要求。复杂程序最多是对cpu内存要求大些。

如果是需要渲染图形界面，理论上和python关系也不大。普通python的图形界面编程对计算机显示硬件要求不高

python要学习多久？

一周或者一个月。

如果完全靠自己自学，又是从零基础开始学习Python的情况下，按照每个人的学习和理解能力的不同，我认为大致上需要半年到一年半左右的时间。

当然了，Python学习起来还是比较简单的，如果有其他编程语言经验，入门Python还是非常快的，花1-2个月左右的时间学完基础，就可以自己编写一些小的程序练练手了，5-6个月的时间就可以上手做项目了。

从一定程度上来说，一些零基础的初学者想要利用两个月的时间掌握好Python是不太可能的，学习完Python后想要应聘相对应的工作岗位，即便是选择最快的学习方式也是很难实现的，无法快速实现就业。

原创文章，作者：小蓝，如若转载，请注明出处：https://www.506064.com/n/258148.html