python - 如何通过 XML 数据更快地更新 MySQL？

Question

XMl 有 5000 条 'product' 记录，MySQL 中的表有 6000 条 'product' 记录，并不是所有的 xml 记录在数据库中都有对应的记录。我想更快地将数据从 xml 放入 mysql。怎么做？现在完成运行所需的时间是 11 秒。

db = MySQLdb.connect(host="",
                         user="",
                         passwd="",
                         db="")
cur = db.cursor()

DOMTree = minidom.parse(file.xml)
cNodes = DOMTree.childNodes

for i in cNodes[0].getElementsByTagName("product"):
    y = i.getElementsByTagName("code")[0].childNodes[0].toxml()
    z = i.getElementsByTagName("available")[0].childNodes[0].toxml()

    cur.execute("UPDATE product SET stock=%s WHERE ean=%s", (z, y))
db.commit()

Answer 1

Executemany 是您的 friend ，您可以收集所有数据并一次性推送它们，而不是在您的 for 循环中重复执行命令。

data = [
  ('A', 'blabla'),
  ('B', 'test1'),
  ('C', 'test2'),
]
stmt = "UPDATE product SET stock=%s WHERE ean=%s"
cur.executemany(stmt, data)

更多信息在这里: http://dev.mysql.com/doc/connector-python/en/connector-python-api-mysqlcursor-executemany.html