gpt4 book ai didi

python - 访问hadoop作业跟踪器ui

转载 作者:行者123 更新时间:2023-12-02 21:04:27 24 4
gpt4 key购买 nike

我正在尝试设置hadoop cluster。目前,我已经设置了一个主节点,并使用Python提交了 map 缩小作业。
作业已提交,我可以在控制台中看到结果。

现在,我一直在尝试查看作业跟踪器的Web ui,以查看作业属性,但不确定应使用哪个端口?
ipaddress : 50070-显示所有的namenode和datanode
ipaddress : 8088-显示集群信息

我应该使用哪个端口查看作业跟踪器?我尝试了port 50030,但未显示任何内容。

使用hadoop 2.7.3版

最佳答案

I dont see any value set for mapreduce.framework.name , what should be the correct value to be set, so that it can be displayed on the YARN?



您没有看到它,因此它是默认设置

Property mapreduce.framework.name
Default: local
Description: The runtime framework for executing MapReduce jobs. Can be one of local, classic or yarn.



mapred-default.xml

您需要将该属性设置为 mapred-site.xml来更新 yarn

关于python - 访问hadoop作业跟踪器ui,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/42371775/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com