postgresql - 消息队列和数据库插入

Question

我是消息队列的新手，对它们的功能和用途很感兴趣。我知道如何使用它，但想知道它是否是该工具的最佳用途。我有一个应用程序可以获取和读取电子表格，将数据业务对象转换为数据库存储。我的应用程序需要读取并能够更新数十万条记录，但我遇到了保留这些对象并批量插入到数据库中的性能问题。

有两个不同的应用程序(一个用于读取电子表格，一个用于存储记录)使用消息队列是否是对消息队列的正确利用？显然，我需要在我的代码中进行一些优化，这将是我的第一步，但我想听听那些使用过消息队列的人的想法。

Answer 1

这不会是对队列的不当使用，但很难判断在您的场景中添加消息队列是否会对您提到的性能问题产生任何影响。我们需要更多信息。

您是否向队列中添加一条消息以通知进程转换电子表格，并在数据准备好加载时添加第二条消息？还是您正在考虑为每个数据记录添加消息？ (这可能会很快变得昂贵，并且可能不会提高性能)。