python - SQLAlchemy - 在 postgresql 中执行批量 upsert(如果存在，更新，否则插入)

Question

我正在尝试使用 SQLAlchemy 模块(不在 SQL 中!)在 python 中编写批量 upsert。

我在 SQLAlchemy 添加时收到以下错误:

sqlalchemy.exc.IntegrityError: (IntegrityError) duplicate key value violates unique constraint "posts_pkey"
DETAIL:  Key (id)=(TEST1234) already exists.

我有一个名为 posts 的表，其中 id 列上有一个主键。

在这个例子中，我已经在数据库中有一行 id=TEST1234。当我尝试 db.session.add() 将 id 设置为 TEST1234 的新帖子对象时，我收到上述错误。我的印象是，如果主键已经存在，记录就会更新。

如何仅基于主键使用 Flask-SQLAlchemy 进行 upsert？有简单的解决方案吗？

如果没有，我总是可以检查并删除任何具有匹配 id 的记录，然后插入新记录，但这对于我的情况来说似乎很昂贵，我不希望有很多更新。

Answer 1

SQLAlchemy 中有一个 upsert-esque 操作:

db.session.merge()

找到这个命令后，我可以执行 upserts，但值得一提的是，这个操作对于批量“upsert”来说很慢。

另一种方法是获取您想要更新插入的主键列表，并在数据库中查询任何匹配的 ID:

# Imagine that post1, post5, and post1000 are posts objects with ids 1, 5 and 1000 respectively
# The goal is to "upsert" these posts.
# we initialize a dict which maps id to the post object

my_new_posts = {1: post1, 5: post5, 1000: post1000} 

for each in posts.query.filter(posts.id.in_(my_new_posts.keys())).all():
    # Only merge those posts which already exist in the database
    db.session.merge(my_new_posts.pop(each.id))

# Only add those posts which did not exist in the database 
db.session.add_all(my_new_posts.values())

# Now we commit our modifications (merges) and inserts (adds) to the database!
db.session.commit()