gpt4 book ai didi

eclipse - 如何使用eclipse调试hadoop wordcount?

转载 作者:行者123 更新时间:2023-12-02 22:05:07 27 4
gpt4 key购买 nike

我想使用eclipse调试wordcount,因为我想查看作业如何在JobTracker中运行。但是hadoop使用Proxy,我不知道该作业如何在JobTracker中运行的具体过程。我应该如何调试?

最佳答案

您最好对单节点集群(例如,Cloudera或Hortonworks提供的沙箱之一)进行“本地”调试:这样一来,您就可以真正地逐步完成代码,因为只有一个映射器/缩减器在运行。至少这是我的方法:通常我必须调试的问题与特定文件的内容有关;我只是将相关文件复制到我的测试系统并在其中进行调试。

关于eclipse - 如何使用eclipse调试hadoop wordcount?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/26099271/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com