python - celery 中可以配置的最大工作线程数和并发数是多少

Question

如果我在 celery 中安排IO 绑定(bind)任务，并且如果我的服务器规范类似于带有 8GB RAM 的四核，我可以有多少工作线程和并发量使用。

如果 CPU 密集型进程，建议对四核处理器使用 4 个工作线程和 8 个并发。 IO 绑定(bind)进程的规范是什么。

在我的任务中，我将执行 API 调用、操作接收到的数据并将处理后的数据存储在服务器中。

Answer 1

这就像问“一根绳子有多长”，我确信没有一个简单的答案。当然，它会超过 8 个线程，所需的最大并发 I/O 任务有一个有用的上限，这可能取决于 I/O 任务正在通信的服务的远程用户的数量。大概在某些数量的任务“操作数据”时，您的处理器将开始加载，您将不再受到 I/O 限制。