celery - 如何在 celery 中安排链式任务

Question

我想运行一个由beat 调度的复杂任务。让我们假设定义了默认的 add/mul 任务。

@app.on_after_configure.connect
def setup_periodic_tasks(sender, **kwargs):
    sender.add_periodic_task(
        crontab(),
        add.s(2,3) | mul.s(2)
    )

但这将在工作人员中返回错误:

NotImplementedError: chain is not a real task

如何使用 celery beat 安排一项重要的任务？

Answer 1

一种方法是在 beat_schedule 中安排您的任务链在您的 celeryconfig , 使用 link选项，celery_tasks这是定义您的任务的模块名称

from celery.schedules import crontab
from celery import signature

beat_schedule = {
    'chained': {
        'task': 'celery_tasks.add',
        'schedule': crontab(),
        'options': {
            'queue': 'default',
            'link': signature('celery_tasks.mul',
                        args=(),
                        kwargs={},
                        options={
                            'link': signature('celery_tasks.another_task', 
                                args=(),
                                kwargs={}, 
                                queue='default')
                        },
                        queue='default')
            },
         'args': ()
    }
}