amazon-sagemaker - 设备上没有剩余空间 [Amazon SageMaker]

Question

我正在 P2.xlarge 实例中训练我的模型。当我下载数据集时，出现以下错误:“下载或提取过程中出现异常:[Errno 28] 设备上没有剩余空间”\
我检查了 P2.xlarge 有 61GiB 存储，转换为 64GB。我的实例中几乎没有 5GB 的数据。你能告诉我如何进行吗？

Answer 1

感谢您使用 Amazon SageMaker。

P2.xlarge 上的 61GiB 是 RAM 存储，它不同于您使用任何 Notebook 实例获得的持久存储。此时，默认情况下每个 Notebook 实例都有 5 GB 的存储空间，无论实例类型如何。请注意，只有存储在这 5 GB 存储中的数据会在笔记本实例重启后持久化，您也可以在/tmp 中使用 ~10* GB 的非持久性存储，但该数据不会在笔记本实例重启后持久化。

另外，您还可以将 EFS 文件系统与 SageMaker 一起使用，以通过 Notebook Instance 获得更多空间。有关于如何使用生命周期操作添加 EFS 挂载的博客，这里是 Mount an EFS file system to an Amazon SageMaker notebook (with lifecycle configurations) .

如果有任何其他方式可以提供帮助，请告诉我们。

免责声明:/tmp 中非持久存储的可用大小可能会随着时间的推移而改变。

注意:这看起来像是 AWS 论坛上帖子的重复，这里是 https://forums.aws.amazon.com/thread.jspa?messageID=858201 .

谢谢，
尼拉姆