gpt4 book ai didi

java - 无法看到 mapreduce wordcount 输出文件

转载 作者:行者123 更新时间:2023-12-01 14:53:36 25 4
gpt4 key购买 nike

我按照michael noll的教程下载并安装了hadoop。我还运行了字数统计示例。但我看不到相同的输出。当我看到 dfs 中的文件时,我得到了我拥有的所有文件列表

enter image description here

但是当我捕获这些文件时,我收到错误:

enter image description here

想知道哪里出了问题......

最佳答案

您尝试访问的 HDFS 中的文件是一个目录(标志列显示 drwxr-xr-x)。 Hadoop 作业通常会将其结果输出到一个目录,每个 reducer 都有一个文件(如果您运行没有 reducer 的作业,则每个映射器都有一个文件)。

所以查看该文件夹的内容,您应该会看到一些part-r 文件 - 尝试并捕获这些文件:

bin/hadoop dfs -cat /user/ravi/tempoutput.txt/part-r-*

关于java - 无法看到 mapreduce wordcount 输出文件,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/14545382/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com