gpt4 book ai didi

oracle - 调整 sqoop 导出性能

转载 作者:可可西里 更新时间:2023-11-01 16:28:45 26 4
gpt4 key购买 nike

我正在使用 AWS EMR 上的 sqoop 将 20 亿条记录 从配置单元导出到 Oracle 数据库。我已经尝试了 --batch--num-mappers 参数,它们已经帮助提高了性能。

调整 -Dsqoop.export.statements.per.transaction-Dsqoop.export.records.per.statement 有帮助吗?

期待有关提高导出吞吐量的其他调整参数的建议。

最佳答案

您是否尝试包含 --direct 选项?我已经看到这会提高 Oracle 导入的性能,具体取决于您的 oracle 版本。

关于oracle - 调整 sqoop 导出性能,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/47000611/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com