merge - 尼菲 : Merging all of necessary flowfile in one shot with MergeContent Processor

Question

这是关于Nifi中MergeContent处理器的问题。目前，我需要一次性将所有流文件与一个特定属性结合起来。

但是发生的事情是因为有太多的流文件具有相同的属性，处理器生成几个与属性合并的不同流文件，这些流文件应该一起组合成一个大流文件。

他们有什么方法可以等待所有具有相同属性的流文件进入 MergeContent 处理器并一次合并所有流文件吗？

如果不能，有什么替代方案？

Answer 1

您可以增加“最小条目数”和“最大条目数”以适合您的用例，并将“最大 Bin Age”增加到合适的时间。

您可以在此处引用合并内容的所有属性:https://nifi.apache.org/docs/nifi-docs/components/org.apache.nifi/nifi-standard-nar/1.6.0/org.apache.nifi.processors.standard.MergeContent/index.html

此外，您是在集群中使用 nifi 还是单独使用？因为一个节点中的流文件不能与另一个节点中的流文件合并。

例如，如果您使用的 nifi 集群有 5 个节点，每个节点有 10 个流文件。使用合并内容处理器后，您将拥有 5 个文件。

如果您需要进一步的帮助，请告诉我!