azure - 如何查询azure hdinsight hadoop集群yarn时间轴服务器

Question

如何查询 Azure HDInsight Hadoop 群集中的时间线服务器以获取作业指标？

连接到 azure 集群​​:

curl -u admin -sS -G "https://$CLUSTERNAME.azurehdinsight.net/api/v1/clusters/$CLUSTERNAME"

连接到时间线服务器:GET/ws/v1/timeline/

我需要一个连接这两个查询来获取 Azure HDInsight Hadoop 群集的作业指标。提前致谢。

Answer 1

1. 查询 Yarn 时间线服务器:sshuser@clustername:~$curl -u admin -G https://clustername.azurehdinsight.net/ws/v1/timeline/

2. 对于所有正在运行的作业:sshuser@clustername:~$ yarn 应用程序-列表

3. 对于所有作业状态:sshuser@clustername:~$ yarn 应用程序 –list -appStates ALL

4. 对于所有已完成的作业:sshuser@clustername:~$ yarn 应用程序 –list -appStates FINISHED

5. 从上面的结果中获取Application-Id:sshuser@clustername:~$curl -u admin -G https://clustername.azurehdinsight.net/ws/v1/applicationhistory/apps/appID