deep-learning - 使用 colab 和 fastai 的训练问题(第一个 epoch 需要很长时间超过 4 小时)

Question

我在使用 colab 和 fastai 进行训练时遇到问题(第一个 epoch 需要很长时间超过 4 小时)。第一个时期只花了我大约 5 个小时，这对使用 google colab 没有用，因为 GPU 的使用限制我正在使用“efficientnet-b4”和大约 52k 数据增强后的训练照片和 11k 有效照片。

问题如图所示:

Answer 1

Colab 需要花费大量时间从 google drive 获取数据，因为它没有有效地索引，因此使第一个 epoch 非常长。对于大型数据集，我建议使用谷歌云存储并从那里导入数据。