python - AMLS 实验运行卡在状态 "Running"

Question

我运行了 Azure 机器学习服务实验，并使用 Jupyter Notebook 记录了神经网络损失。日志记录工作正常，神经网络训练也按预期完成。但实验一直停留在运行状态。关闭计算资源不会关闭实验运行，我无法从实验面板取消它。此外，运行没有任何日志文件。

有人有同样的行为吗？运行现已持续超过 24 小时。

Answer 1

这种情况时常发生。这确实令人沮丧，尤其是因为“取消”按钮变灰了。您可以使用 CLI 或 Python SDK 取消运行。

SDK

>= 1.16.0

从版本 1.16.0 开始，您不再需要 Experiment 对象。相反，您可以使用 Run 进行访问或Workspace直接对象

from azureml.core import Workspace, Experiment, Run, VERSION
print("SDK version:", VERSION)

ws = Workspace.from_config()

run = ws.get_run('YOUR_RUN_ID')
run = Run().get(ws, 'YOUR_RUN_ID') # also works
run.cancel()

<1.16.0

from azureml.core import Workspace, Experiment, Run, VERSION
print("SDK version:", VERSION)

ws = Workspace.from_config()
exp = Experiment(workspace = ws, name = 'YOUR_EXP_NAME')

run = Run(exp, run_id='YOUR STEP RUN ID')

run.cancel() # or run.fail()

命令行界面

More CLI details here

az login
az ml run cancel --run YOUR_RUN_ID

<小时/>

2023 年 5 月 5 日更新了 CLI 命令:

az ml job cancel --name YOUR_JOB_NAME --resource-group YOUR_RG --workspace-name YOUR_WS