gpt4 book ai didi

java - docker 容器中的 Kafka-connect 日志

转载 作者:行者123 更新时间:2023-11-30 10:25:01 27 4
gpt4 key购买 nike

我有一个 kafka connect jar,需要作为 docker 容器运行。我需要在容器中的日志文件中捕获我所有的连接日志(最好是在目录/文件 -/etc/kafka/kafka-connect-logs),稍后可以将其推送到本地主机(运行 docker 引擎的主机)使用docker 中的卷。当我更改 connect-log4j.properties 以附加到日志文件时,我发现没有创建任何日志文件。如果我在没有 docker 的情况下尝试相同的操作,并通过更改 connect-log4j.properties 将日志写入日志文件来在本地 linux VM 上运行 kafka connect,它可以完美运行,但不能从 docker 运行。任何建议都会非常有帮助。

Docker 文件

FROM confluent/platform

COPY Test.jar /usr/local/bin/
COPY kafka-connect-docker.sh /usr/local/bin/
COPY connect-distributed.properties /usr/local/bin/
COPY connect-log4j.properties /etc/kafka/connect-log4j.properties

RUN ["apt-get", "update"]
RUN ["apt-get", "install", "-yq", "curl"]
RUN ["chown", "-R", "confluent:confluent", "/usr/local/bin/kafka-connect-docker.sh", "/usr/local/bin/connect-distributed.properties", "/usr/local/bin/Test.jar"]
RUN ["chmod", "+x", "/usr/local/bin/kafka-connect-docker.sh", "/usr/local/bin/connect-distributed.properties", "/usr/local/bin/Test.jar"]
RUN ["chown", "-R", "confluent:confluent", "/etc/kafka/connect-log4j.properties"]
RUN ["chmod", "777", "/usr/local/bin/kafka-connect-docker.sh", "/etc/kafka/connect-log4j.properties"]

EXPOSE 8083

CMD [ "/usr/local/bin/kafka-connect-docker.sh" ]

connect-log4j.properties

# Root logger option
log4j.rootLogger = INFO, FILE

# Direct log messages to stdout
log4j.appender.FILE=org.apache.log4j.FileAppender
log4j.appender.FILE.File=/etc/kafka/log.out
# Define the layout for file appender
log4j.appender.FILE.layout=org.apache.log4j.PatternLayout
log4j.appender.FILE.layout.conversionPattern=%m%

log4j.logger.org.apache.zookeeper=ERROR
log4j.logger.org.I0Itec.zkclient=ERROR

kafka-connect-docker.sh

#!/bin/bash
export CLASSPATH=/usr/local/bin/Test.jar
exec /usr/bin/connect-distributed /usr/local/bin/connect-distributed.properties

当我使用默认的 connect-log4j.properties(将日志附加到控制台)时,它工作正常,但无法在 docker 中创建日志文件。此外,没有 docker 的相同进程在本地 VM 中工作正常(创建日志文件)。

最佳答案

讨论结果:

立即在 dockerfile 中声明卷并配置日志记录配置以将日志输出直接放置到卷中。在 docker run 上(或者以任何方式启动容器)安装卷,你应该没问题。

关于java - docker 容器中的 Kafka-connect 日志,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/46426571/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com