google-colaboratory - 机器学习和模型训练

Question

我正在开展一个机器学习项目，在 Google Colab 上训练我的模型。我已经克隆了存储库，并且模型是使用 tensorflow 框架构建的。

但是，我的数据集太大。在运行模型之前，我想到了两个问题:

1) 如果我让模型过夜接受训练，最明智的方法是什么来知道我的训练已完成/剩下的时间？ (任何通过电子邮件通知...或？)

2) 如果互联网连接中断会发生什么

我的 Google 搜索没有提供我可以理解的答案。如果您能帮助我解决我的疑问，我将不胜感激。

Answer 1

最多可以同时运行 2 个实例，并链接到您的 Google 帐户。继续备份你的重量，如果需要超过 12 小时就重新训练。

对于如此漫长的工作，投资 VPS 总是更好，但要回答您的问题，

1. 打开浏览器时，Colab 上作业的最长生命周期为 12 小时。因此，定期保存模型权重是个好主意。在训练时备份权重的脚本是个好主意。

2. 如果互联网连接中断，笔记本将运行 90 分钟，然后实例将被视为空闲并被回收。这类似于关闭浏览器。