在Amazon Web Services上训练神经网络以训练神经网络的最佳方法是什么?

时间:2017-02-28 07:35:25

标签: amazon-web-services keras convolution

也许这是一个愚蠢的问题,但我无法解决我的问题。

我有一个数据集,其中包含许多按类划分的图像(如thisthis)。数据大小超过5 Gb。 我需要训练深度卷积神经网络(例如Inception)。

此类网络的培训需要大量计算资源,而这些资源在我的计算机中是不可用的。所以,我决定在亚马逊GPU实例上训练它。我在this nice tutorial中创建了一个实例。我通过WinSCP连接它(解释here)。但是我在我的实例EBS卷上上传数据时遇到了问题。当我尝试用WinSCP做这个时,需要花费很多时间(超过10个小时)。我的互联网连接速度是10 Mb /秒,但在ec2上传文件的速度是50-60 Kb /秒。我不知道,为什么。

您能否提出解决问题的最佳方法?例如,是否可以在不运行实例的情况下创建光盘,将数据上传到该光盘然后将其附加到实例?如果是这样,建议指向教程的链接。

实例是Ubuntu,我的操作系统是Windows 10。

非常感谢!

0 个答案:

没有答案