linux - 排队系统

Question

我需要实现一个新项目，该项目将在三台不同的服务器上进行处理。

基本上，一个系统将填满一个队列，然后每个单独的系统将从该队列中提取(弹出作业/消息)，并执行其业务。因此本质上，在标准 FIFO 中，子服务器上的进程将执行弹出操作。

在所有排队系统中，有哪些建议？我研究了 RabbitMQ，但这更多的是“推”，就像我说的，我需要“拉”？我真的不想 build 一个，只是捕获一些有用的东西。当然它必须是开源的:-)

谢谢

Answer 1

看一下 beanstalkd(一个基于 python 的排队系统)。它非常简单，但速度非常快并且有点灵活。我在 EC2 云上使用过它，队列和服务(删除)大约为 500 个作业/分钟，其中队列由 100 台机器同时访问。