gpt4 book ai didi

java - 将 Log4j 输出写入 HDFS

转载 作者:可可西里 更新时间:2023-11-01 14:15:59 25 4
gpt4 key购买 nike

有没有人试过log4j日志文件直接Hadoop分布式文件系统

如果是,请回复如何实现。我想我必须为它创建一个 Appender。

是这样吗?我需要以特定的时间间隔将日志写入文件,并在稍后阶段查询该数据。

最佳答案

我建议使用 Apache Flume为了这个任务。有 Flume appender for Log4j .这样,您将日志发送到 Flume,然后它写入 HDFS。这种方法的好处是 Flume 成为与 HDFS 的单点通信。 Flume 使添加新数据源变得容易,而无需编写一堆代码来一次又一次地与 HDFS 交互。

关于java - 将 Log4j 输出写入 HDFS,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/16420170/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com