gpt4 book ai didi

java - 使用线程进行记录插入的最佳实践?

转载 作者:塔克拉玛干 更新时间:2023-11-01 22:24:14 26 4
gpt4 key购买 nike

我想用超过 5 亿行填充数据库表,我有下面的 insert 方法:

public void insertRecord(Record rec) throws SQLException, ClassNotFoundException {

if (this.isTableExists(this.TABLE_NAME)) {

Connection conn = this.getConnection();
conn.setAutoCommit(true);
PreparedStatement ps = conn.prepareStatement("insert into "+this.TABLE_NAME+" ("+this.NODE_ID_COL+", "+this.LAT_COL+", "+this.LNG_COL+", "+this.XML_PATH_COL+") values (?, ?, ?, ?)");

ps.setString(1, rec.getNodeID());
ps.setString(2, rec.getLat());
ps.setString(3, rec.getLng());
ps.setString(4, rec.getPath());

ps.addBatch();
ps.executeBatch();

ps.close();
conn.close();

} else {
Log.e(TAG, "insertRecord", "table: ["+this.TABLE_NAME+"] does not exist");
}

}

我的问题是,因为我将插入大量行:

  1. 我应该在上面发布的方法中使用线程吗?
  2. 这种情况下的最佳做法是什么?
  3. 在这种情况下,ExecutorService 的性能会变差吗?

最佳答案

您的方法效率很低。对于每条记录,您

  1. 获得一个新的连接(如果你有一个连接池,这不是一个问题)
  2. 准备一个新的PreparedStatement
  3. 创建大小为 1 的批处理
  4. 立即执行批处理

相反,您应该保留一个 PreparedStatement 并在其上执行大小为 50-100 的批处理。

之后你可以考虑多线程,如果你知道你在做什么。多线程并不是让一切变得更快的魔法。

关于java - 使用线程进行记录插入的最佳实践?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/31942881/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com