gpt4 book ai didi

java - 如何从目录中选择特定的输入文件到Mapreduce程序

转载 作者:行者123 更新时间:2023-12-02 20:54:16 24 4
gpt4 key购买 nike

我正在运行一个Mapreduce程序,并且我的输入目录有多个文件。比方说

  • file1.txt
  • file2.txt
  • file3.txt

  • 我只想使用file2.txt。如何在不删除输入目录中其余文件的情况下执行此操作?

    最佳答案

    您可以在代码本身中指定文件名

    码:

     FileInputFormat.addInputPath(job, "/inputfoldername/file2.txt");

    或者您可以在运行时执行

    码:
     FileInputFormat.addInputPath(job, new Path(args[0]));

    执行:
     hadoop jar Wordcount.jar Wordcount /inputfoldername/file2.txt /outputfoldername

    有关更多详细信息,请参见 https://ybhavesh.blogspot.com上提供的一些Mapreduce POC

    希望对您有所帮助!! ...

    关于java - 如何从目录中选择特定的输入文件到Mapreduce程序,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/45088817/

    24 4 0
    Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
    广告合作:1813099741@qq.com 6ren.com