marklogic - 使用 MLCP 复制数据时出现异常

Question

我尝试使用 MLCP 将 100 万个文档从一个数据库复制到另一个数据库，但出现以下异常。

19/08/30 11:48:08 ERROR contentpump.DatabaseContentReader: RuntimeException reading /integration/test/88398921012548 :java.lang.RuntimeException: Could not buffer value as string

我不确定此异常的原因。

请指导我理解原因。

MLCP 以及我使用过的所有选项

mlcp copy -mode local -input_host 192.168.1.46 -input_port 9000 -input_username admin -input_password admin -input_database test  -output_host localhost -output_port 8000 -output_username admin -output_password admin -output_database test

Answer 1

MLCP 倾向于并行运行多个线程，但这可能会导致源或目标系统耗尽资源。此外，您在与目标数据库相同的主机上运行 MLCP，它们也可能会争夺资源。最好看看如果使用 -thread_count 1 降低 MLCP 的速度会发生什么。从那里您可以再次扩大规模。

还要注意 MLCP 内存消耗，您可能需要使用 JVM_OPTS 为其提供更多内存。另请参阅:https://stackoverflow.com/a/54685758/918496

呵呵!