cron - 如何设计分布式作业调度器？

Question

关闭。这个问题需要多问 focused 。目前不接受答案。

---

想要改进此问题吗？更新问题，使其仅关注一个问题 editing this post .

已关闭 4 年前。

Improve this question

我想设计一个作业调度器集群，其中包含多个主机来进行cron作业调度。例如，一个工作需要 run every 5 minutes提交到集群后，集群应该指出下次运行要触发哪个主机，确保:

1. Disaster tolerance: if not all of the hosts are down, the job should be fired successfully.
2. Validity: only one host to fire next job run.

由于容灾的原因，作业无法绑定(bind)到特定主机。一种方法是所有主机轮询数据库表(当然带有锁)，这保证只有一台主机获得下一个作业运行。由于经常锁表，有没有更好的设计？

Answer 1

使用Quartz framework为了那个原因。它具有类似 cron 的语法，可以集群化，集群中一次只有一台主机执行一项工作。如果主机或作业失败，另一台主机将重试待处理的作业。