python - 如何优化 DAL web2py 查询？

Question

result = db((db.company.location.belongs(locations)) &
            (db.company.emp_id.belongs(employee_ids)) &
            (db.company.type.belongs(types))).select()

locations 是位置 ID 列表

employee_ids 是员工 ID 列表

types = ['常规', '办公', '电子商务']

此查询返回 60,000 条记录，需要 1 分钟才能完成。如何优化或拆分它？

Answer 1

您的 DAL 查询大约需要 1 分钟的时间是因为 .select() 方法返回的是一个 Rows 实例，其中包含 60,000 个 Row 对象。这些类的许多实例化都包含耗时和内存消耗的操作。作为解决方案，您可以:

• 使用limit by将该查询拆分为X部分参数:.select(limitby=(0, X)) 或;
• 使用executesql db().executesql(SELECT * FROM...) 使用 SQL 构建查询。返回将是元组，没有任何 Row 或 Rows 实例化，并且速度更快，但您可能会遇到无法享受 Row 对象的好处的缺点；

如果上述任何方法都解决了您的问题，并且您的操作非常耗时，您可以尝试将拆分解决方案与线程一起使用。