我正在训练P2.xlarge实例中的模型。下载数据集时,出现以下错误:“下载或提取期间发生异常:[Errno 28]设备上没有剩余空间” \ 我检查了P2.xlarge是否有61GiB存储空间,可以转换为64GB。我的实例中几乎没有5GB的数据。您能告诉我如何进行吗?
答案 0 :(得分:1)
感谢您使用Amazon SageMaker。
P2.xlarge上的61GiB是RAM存储,与任何笔记本实例获得的持久存储不同。目前,默认情况下,无论实例类型如何,每个Notebook实例均具有5 GB的存储空间。请注意,仅在此5 GB存储空间中存储的数据会在Notebook实例重新启动期间保留,您还可以在/ tmp中使用〜10 * GB的非永久存储,但这些数据不会在Notebook实例重新启动期间保留。
在侧面,您还可以将EFS文件系统与SageMaker结合使用,以使Notebook Instance具有更多的空间。在Mount an EFS file system to an Amazon SageMaker notebook (with lifecycle configurations)上有一个博客,介绍如何通过生命周期操作添加EFS装载。
让我们知道是否还有其他方法可以为您提供帮助。
免责声明:/ tmp中非永久性存储的可用大小可能会随时间变化。
注意:这看起来像是AWS论坛上(https://forums.aws.amazon.com/thread.jspa?messageID=858201)上帖子的重复。
谢谢,
尼拉姆
答案 1 :(得分:0)
默认情况下,无论笔记本实例是哪种类型,它们都具有5GB的存储空间。您还可以在/ tmp中使用20GB的非永久性存储。
https://docs.aws.amazon.com/sagemaker/latest/dg/howitworks-create-ws.html
希望这会有所帮助。