hadoop - Hadoop的参数传递

Question

我知道可以使用以下方法将可写对象传递给mapper:

DefaultStringifier.store(conf，object，“key”);

object = DefaultStringifier.load(conf，“key”，Class);

我的问题是:

在一个映射器中，我读出了对象，然后更改了该对象的值，

例如:object = another。

如何确保对象值的更改

下次映射器任务可以知道吗？

有没有更好的方法将参数传递给映射器？

Answer 1

请改用文件系统。将值写入HDFS，然后用其他内容替换文件。 config和DistributedCache都不适合可变状态。