gpt4 book ai didi

hadoop - 作业跟踪器中的配置单元查询

转载 作者:可可西里 更新时间:2023-11-01 16:15:27 25 4
gpt4 key购买 nike

您好,我们正在最近升级到的 CDH 4 环境中运行配置单元查询。我注意到的一件事是,在早期的 CDH 3 中,我们能够在 Job tracker 中跟踪我们的查询。

类似于“hostname:50030/jobconf.jsp?jobid=job_12345”的链接会有一个参数“hive.query.string”或“mapred.jdbc.input.bounding.query”,其中包含实际查询MR 作业被执行。

但在 CDH4 中,我看不到在哪里可以获得查询。许多查询并行运行以跟踪我们关注的查询。

最佳答案

您仍然可以在工作跟踪器中查看配置单元查询。

根据job id 从url hostname:50030/jobtracker.jsp 获取job信息

您会在页面顶部找到一些详细信息,如下所述。

Hadoop Job 4651 on History Viewer User: xxxx JobName: test.jar
JobConf:
hdfs://domain:port/user/xxxx/.staging/job_201403111534_4651/job.xml
Job-ACLs: All users are allowed Submitted At: 14-Mar-2014 03:15:19
Launched At: 14-Mar-2014 03:15:19 (0sec) Finished At: 14-Mar-2014
03:18:04 (2mins, 44sec) Status: FAILED Analyse This Job

现在单击 Job Conf 旁边的 URL,您将找到您提交的 Hive 查询。

关于hadoop - 作业跟踪器中的配置单元查询,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/22399519/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com