gpt4 book ai didi

hadoop - 使用Cloudera模拟Map-Reduce

转载 作者:行者123 更新时间:2023-12-02 20:13:29 25 4
gpt4 key购买 nike

我想使用cloudera在单台机器(当然有很多VM)上模拟Hadoop作业。我有两个问题
1)我可以在cloudera中更改HDFS的复制策略吗?
2)我可以看到每个VM的CPU使用率吗?

最佳答案

您可以使用 hadoop fs -setrep 更改任何文件上的复制因子。您还可以通过添加以下内容来修改hdfs-site.xml来更改默认复制因子:
<property>
<name>dfs.replication</name>
<value>2</value>
</property>

您必须登录每个框,然后使用top查看每个VM的CPU使用情况。 Hadoop中没有开箱即用的内容可让您看到。

关于hadoop - 使用Cloudera模拟Map-Reduce,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/10326998/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com