java - MapReduceBase 和 Mapper 已弃用

Question

public static class Map extends MapReduceBase implements Mapper

MapReduceBase、Mapper 和 JobConf 在 Hadoop 0.20.203 中已弃用。

我们现在应该用什么？

编辑 1 - 对于 Mapper 和 MapReduceBase，我发现我们只需要扩展 Mapper

public static class Map extends Mapper
            <LongWritable, Text, Text, IntWritable> {
  private final static IntWritable one = new IntWritable(1);
  private Text word = new Text();

  public void map(LongWritable key, Text value, 
         OutputCollector<Text, IntWritable> output, 
         Reporter reporter) throws IOException {
    String line = value.toString();
    StringTokenizer tokenizer = new StringTokenizer(line);
    while (tokenizer.hasMoreTokens()) {
      word.set(tokenizer.nextToken());
      output.collect(word, one);
    }
  }
}

编辑 2 - 对于 JobConf，我们应该使用这样的配置:

public static void main(String[] args) throws Exception {
        Configuration conf = new Configuration();
        Job job = new Job(conf);
        job.setMapperClass(WordCount.Map.class);
    }

编辑 3 - 我根据新 API 找到了一个很好的教程:http://sonerbalkir.blogspot.com/2010/01/new-hadoop-api-020x.html

Answer 1

Javadoc 包含使用什么替代这个贬低类的信息:

例如http://hadoop.apache.org/common/docs/current/api/org/apache/hadoop/mapred/JobConf.html

 Deprecated. Use Configuration instead

编辑:当您使用 maven 并打开类声明 (F3) 时，maven 可以自动下载源代码，您将看到带有解释的 javadoc 注释内容。