gpt4 book ai didi

flume-ng - 在 Apache Flume 中传输文件时如何保留文件名?

转载 作者:行者123 更新时间:2023-12-02 21:53:48 25 4
gpt4 key购买 nike

我正在使用 Flume 1.3.1 ng,我正在将文件从 spoolDir 传输到 HDFS Sink,并且我需要与输入文件相同的输出文件名称。例如,如果输入文件名为sample.gz,则输出也需要为sample.gz

您能否提供一下如何在 Flume 1.3.1 ng 中实现此功能的过程。

最佳答案

我正在使用以下设置:

a1.sources.r1.basenameHeader = true
a1.sinks.k1.hdfs.filePrefix = %{basename}

这些设置给我带来了以下转变:

original_file.txt -> original_file.1457085474015.txt

遗憾的是,您似乎无法从文件名中删除时间戳:C

关于flume-ng - 在 Apache Flume 中传输文件时如何保留文件名?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/29827209/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com