gpt4 book ai didi

hadoop - 是否有可能检查 Flume 中的空 channel /接收器的内容?

转载 作者:行者123 更新时间:2023-12-02 21:04:54 27 4
gpt4 key购买 nike

我想确保 Flume 正常工作并且不会丢弃符合我选择标准的事件。

最佳答案

或许您可以使用 将完整的事件记录到文件中。文件卷接收器 然后您可以在该文件上应用过滤逻辑(无论您在拦截器中使用哪个)以获取过滤事件列表。然后这可以与 Flume 过滤的事件进行匹配和验证。如果您正在处理大量事件,那么您可以在采样持续时间内执行此操作。

注:要测试上述解决方案,您可以为同一来源创建两个不同的 channel ,以便一个用于记录,另一个用于过滤

关于hadoop - 是否有可能检查 Flume 中的空 channel /接收器的内容?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/42268724/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com