gpt4 book ai didi

hadoop - Hadoop.1.0.3不再工作

转载 作者:行者123 更新时间:2023-12-02 21:42:13 26 4
gpt4 key购买 nike

我正在使用hadoop.1.0.3。一切都很好,但是从今天早上开始我不能运行我的程序了。
例如,要运行WordCount示例,我使用以下脚本:

javac -classpath $HADOOP_HOME/hadoop-core-1.0.3.jar *.java
rm -f wordcount.jar
jar cvf wordcount.jar *.class
chmod 777 wordcount.jar
rm -f output*.txt

hadoop dfs -copyFromLocal /path/to/path/input.txt /user/path/input.txt

hadoop jar wordcount.jar WordCount WordCount/input.txt output/outputWordCount

rm -f output.txt

hadoop fs -cat 'output/outputWordCount/part-*' > output.txt
hadoop dfs -rmr /user/mahnaz/output
more output.txt

启动hadoop之后,我运行此.sh文件并获得以下结果:
$ sh run.sh
added manifest
adding: WordCount$Map.class(in = 1918) (out= 796)(deflated 58%)
adding: WordCount$Reduce.class(in = 1591) (out= 642)(deflated 59%)
adding: WordCount.class(in = 1516) (out= 743)(deflated 50%)
Warning: $HADOOP_HOME is deprecated.

copyFromLocal: org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot create file/path/inputEdgeCount/edge.txt. Name node is in safe mode.
Warning: $HADOOP_HOME is deprecated.

实际上,在最后一次警告之后,程序将没有任何进展,我必须通过 ctrl+c退出

您是否有问题,我应该怎么做?

最佳答案

这意味着,如果您以前已经成功使用过HDFS系统,则它仍在启动,否则可能意味着HDFS损坏或其他问题。

如果您认为一切正常,则可以尝试强制节点退出安全模式:

hdfs dfsadmin -safemode leave

关于hadoop - Hadoop.1.0.3不再工作,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/27968296/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com