Apache Nifi中的數據聚合

Question

我使用Apache nifi來處理來自不同資源的數據，並且我爲每個數據流都創建了獨立的管道。我想結合這些數據進一步處理。有什麼方法可以將數據聚合並將其寫入單個文件。數據以Nifi中的flowfiles屬性的形式呈現。

Answer 1

您應該使用MergeContent處理器，該處理器接受最小/最大批處理大小的配置值等，並根據所提供的合併策略將大量流文件合併到單個流文件中。