个人中心
文章发布
退出
作者热门文章
- c - 在位数组中找到第一个零
- linux - Unix 显示有关匹配两种模式之一的文件的信息
- 正则表达式替换多个文件
- linux - 隐藏来自 xtrace 的命令
25
4
我有一个小脚本，可以将任务排入队列进行处理。该脚本进行大量数据库查询以获取应排队的项目。我面临的问题是， celery worker 一旦被脚本排队就开始接收任务。这是正确的，这也是 celery 应该工作的方式，但这通常会导致我的脚本和 celery worker 之间出现死锁。
有没有一种方法可以将脚本中的所有任务排入队列，但延迟执行直到脚本完成或直到固定的时间延迟？
我在 celery 或 django-celery 的文档中找不到这个。这可能吗？
目前，作为一种快速修复，我考虑过将所有要处理的项目添加到一个列表中，当我的脚本执行完所有查询后，我可以简单地遍历该列表并将任务排入队列。也许这可以解决问题，但是当您有数千个项目要排队时，这可能不是一个好主意。
最佳答案
eta/countdown 选项可以延迟任务执行:
https://docs.celeryq.dev/en/stable/userguide/calling.html#eta-and-countdown
关于python - 如何推迟执行 Celery 任务？，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/13006151/
25
4
0
当我运行此命令进行 celery 节拍时。 [2013-06-27 02:17:05,936: INFO/MainProcess] Celerybeat: Starting... [2013-06-2
我需要构建一个处理两种类型任务的系统。一种类型可以创建更多自身或另一种类型的任务。将有很少的 worker (2-3)和只有一个主机。最重要的要求是系统应该优雅地处理重新启动:即在重新启动时，正在进行
我们使用 Celery 4.2.1 和 Redis，并为我们的任务设置了全局软超时和硬超时。我们所有的自定义任务都设计为保持在限制范围内，但每天内置任务 backend_cleanup 任务最终都会因
我知道这违背了使用 Celery 的全部目的，但是是否有一个函数会阻塞直到结果返回？ 所以我可以调用 actual_result = MyTask.dont_delay(some_arg="foo")
我们使用 Celery 4.2.1 和 Redis，并为我们的任务设置了全局软超时和硬超时。我们所有的自定义任务都设计为保持在限制范围内，但每天内置任务 backend_cleanup 任务最终都会因
我知道这违背了使用 Celery 的全部目的，但是是否有一个函数会阻塞直到结果返回？ 所以我可以调用 actual_result = MyTask.dont_delay(some_arg="foo")
我计划使用 celery 作为我的项目的任务管理组件。它几乎具有我的项目所需的所有功能。我将有一组可以独立执行或按指定顺序执行的任务。在顺序任务中，我希望能够在中间任务之一失败时执行清理/回滚。我想知
它是运行 Celery 的实际处理器还是另一个进程？在花中，我可以在工作池中看到多个进程吗？这两者之间有什么区别？ 最佳答案 当您运行 celery worker 时，它会创建一个父进程来管理正在运行
我有一个名为 ShippingApp 的项目，我按照步骤设置了 celery worker。我将 celery 3.1.26.post2 与 python3.7 一起使用，当我想启动 Celery W
尽我所能，我无法杀死这些 celery worker 。 我跑: celery --app=my_app._celery:app status 我看到我有3个(我不明白为什么3个 worker = 2
我在 docker 容器中运行了 celery ，我想检查选项 CELERY_TASK_RESULT_EXPIRES = '3600' 是否已应用。 我尝试使用 celery inspect conf
我使用 celery.chord(...) 创建一组任务和一个方法，该方法在组中的所有任务完成后被调用。 我使用 amqp 结果后端(但我想切换到 memcached)。 我的 worker 每秒钟一
我正在寻找一些关于将任务生成的列表映射到 celery 中的另一个任务的最佳方法的建议。 假设我有一个名为 parse 的任务，它解析 PDF 文档并输出页面列表。然后，每个页面都需要单独传递给另一个
这不是关于如何捕获 celery worker 日志的问题。有什么方法可以捕获生产者上的 celery 日志记录。我想要的是捕获当我调用 task.delay(...) 或 task.apply_as
我正在使用以下版本: 花==0.9.3 celery ==4.3.0 这为我提供了包含多个列的任务页面的以下显示: 每次我进入这个页面时，我最终都会重新排列页面，使列的顺序不同，并将行的顺序更改为降序
我想完成这样的事情: results = [] for i in range(N): data = generate_data_slowly() res = tasks.process
我想运行一个由beat 调度的复杂任务。让我们假设定义了默认的 add/mul 任务。 @app.on_after_configure.connect def setup_periodic_tasks
我有一个应用程序，其中包含 celery worker 。当我部署这将杀死那些正在运行的进程。 所以任务将开始，但永远不会完成，并且在部署完成时不会重新启动。 避免此问题并在部署完成后重新启动这些任务
我正在开始使用 Celery 进行 Django 项目。出于本地开发目的，我根据这些说明使用 djcelery 和 djkombu(数据库传输)进行了设置 http://ask.github.com/
如何配置 celery 在任务失败时发送电子邮件警报？ 例如，我希望 Celery 在 3 个以上的任务失败或 10 个以上的任务被重试时通知我。 是否可以使用 celery 或实用程序(例如花)，或
我是一名优秀的程序员,十分优秀！