migration - Kafka数据从一台服务器拷贝到另一台

Question

我的kafka版本是0.8.2。现在我想将数据从服务器A复制到服务器B，然后期望服务器B中的kafka与服务器A中的一样。

我尝试复制 $log.dirs 中的所有数据，其中包括 kafa-logs 和 zookeeper。但它不起作用。

是否可以只复制一些数据文件，然后使其在服务器 B 中像在服务器 A 中一样正常工作？

就像我从生产环境中复制一个 sql 转储文件并运行到我的本地 mysql 服务器，然后它将像在生产服务器中一样工作。

Answer 1

试试kafka的kafka-mirror-maker，像这样，

>bin/kafka-mirror-maker.sh
        --consumer.config consumer.properties
        --producer.config producer.properties --whitelist my-topic

https://kafka.apache.org/documentation.html#basic_ops_mirror_maker

consumer.properties是服务器A的配置，可以修改zookeeper.connect到服务器A的zookeeperproducer.properties是server B的配置，可以修改bootstrap.servers为server B的

白名单是您要从中复制的主题。