- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我目前正在将环境从Heroku中移出,我的应用程序的一部分正在运行一个时钟进程,该进程启动了Sidekiq后台作业。
据我了解,Sidekiq由一个客户端和一个服务器组成,该客户端将要排队的作业发送到Redis中,该服务器提取队列的请求并对其进行处理。我现在正在尝试将应用程序拆分为Docker上的以下容器:
-Redis容器
-时钟容器(使用Clockwork gem)
- worker 容器
-Web应用程序容器(Rails)
但是,我不确定应该如何拆分Sidekiq服务器和客户端。本质上,时钟容器需要在其上运行Sidekiq,以便客户端可以经常将作业发送到Redis队列。但是,工作容器还应该在其上运行Sidekiq(虽然是服务器),以便它们可以处理作业。我认为,很可能可以在不同容器之间划分职责,因为Heroku允许您在各种测功机之间进行划分。
我可以想象做到这一点的一种方法是分配时钟容器以拉出不存在的队列,以便它永远不会从队列中拉出任何作业,然后将工作程序设置为拉出已存在的队列。但是,对于我来说,这似乎并不是最理想的方法,因为它仍将检查此不存在的队列中的新作业。
关于如何开始进行此操作的任何提示或指南?
最佳答案
sidekiq客户端只是将作业发布到Redis中。 sidekiq守护进程仅订阅redis并在发布工作线程时启动它们。
因此,您只需将redis gem安装在两个容器上:Clock container
和Worker Container
,仅在Worker Container
上启动worker守护程序,并为两者提供适当的redis config。您还必须确保 worker 源代码在两个服务器/容器上均可用,因为Sidekiq客户端仅存储 worker 类的名称,然后守护程序通过元编程实例化它。
但是实际上,您也可以只包括sidekiq守护进程以及处理 worker 工作所需的每个应用程序。是的,对于每个进程来说,有一个针对每个容器使用docker的最佳实践,但是恕我直言,这不是一个全有或全无的规则。在这种情况下,我将两个过程视为一个整体。这只是在后台运行一些代码的一种方式。然后,您只需配置相同应用程序的实例即可针对相同的sidekiq队列工作。或者甚至可以配置为每个物理节点再次运行一个单独的队列。
关于ruby-on-rails - 将时钟进程与Docker上的sidekiq worker分开,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/30416969/
我想使用 rails 控制台重新启动所有失败的作业。有没有办法做到这一点?我可以使用以下方法获取工作列表: require 'sidekiq/api' Sidekiq::Queue.new("mail
我想使用 Datadog 来监控一些后台作业的队列长度。 基本上我需要知道 Sidekiq 中代表队列的键的名称 ,以便我可以按照此处所述对其进行监控: https://docs.datadoghq.
我将 Sidekiq 与 Rails 一起使用,返回的并发值似乎是错误的。 Sidekiq.options[:concurrency] 返回 10 而不是 3,这是我的 config/sidekiq.
从Rails API中,我发现ActiveJob可以retry_job间隔: my_job_instance.enqueue my_job_instance.enqueue wait: 5.minut
我正在一个作业中进行一些处理,最终执行一个外部 shell 命令。该命令正在执行需要数小时才能完成的脚本。 问题是在我使用 spawn 启动脚本后和 detach如果我使用 kill -15 信号关闭
我有一个使用 Capistrano 部署的 Rails 3 应用程序。我最近添加了 Sidekiq。它在我的开发中运行良好。我同时主持 staging和 preview在同一台服务器上,它的预览无法正
我有一个简单的工作线程正在访问其自己的队列的大小: 需要“sidekiq/api” class TestWorker include Sidekiq::Worker def perform(*
我在我的 Rails 应用程序中使用 sidekiq。默认情况下,任何人都可以通过在 url 后附加“/sidekiq”来访问 Sidekiq。我只想用密码保护/验证 sidekiq 部分。我该怎么做
我正在在线阅读一些教程,这些教程告诉我们将 ActiveJob 与 Sidekiq 结合使用。但我不知道我们为什么要这样做。我看到 Sidekiq 具有 ActiveJob 的所有功能。 此外,在 S
我猴子修补了我的用户类(由设计支持)以像这样使用 ActiveJob: class User ActionMailer::DeliveryJob, :args=>["Devise::Mailer",
我有 sidekiq 作业对多种类型的资源进行处理。但是,对于特定类型的资源,例如:资源 X,我需要确保在任何给定时间只有一个 sidekiq 作业可以处理该特定资源。 例如,如果我有 3 个 sid
在过去的一年里,我对我的一项工作的流程进行了大量更改。诸如从相应模型上的 after_commit 而不是 after_create 触发它,以及清理逻辑和覆盖极端情况 我在我的 Heroku Rub
我看到this在 Sidekiq 官方 wiki 中,ActiveJob 会慢得多。 但它是在 2018 年 3 月根据此 issue 基于 Rails 4.2 和 Sidekiq 5.1.1 提到的
我使用 Rails 4 默认测试框架并编写了一些测试,这些测试也希望 Sidekiq 在“后台”做一些工作。但是当我运行 rake test 时,我的测试结果看起来像这样: .............
我们几周前在我们的系统中添加了监控用户事件,如下所示: class ApplicationController < ActionController::Base before_filter :lo
我正在运行 7 个 sidekiq 进程(货币设置为 40)和一个乘客网络服务器,连接到 postgres 数据库。 Rails 池设置设置为 100,postgres max_connectio
我第一次在 Rails 应用程序中使用 Sidekiq。这也是我第一次使用Redis。 我见过几个示例(Here、here、here),其中 initializers/sidekiq.rb 包含以下几
我刚开始使用 sidekiq 和 redis,我试图让 sidekiq 在 Heroku 上运行,但每次我部署 Rails 4 应用程序时它似乎都会崩溃。我在 Papertrail 中收到此错误: M
我有一个要求,我应该能够每秒运行 100 个 sidekiq 作业。 我将服务器容量增加到 8 个 CPU 并创建了 4 个 sidekiq 进程,但它仍然每分钟服务 50 个作业。 我不确定我在哪里
我在 Sidekiq 中有两种队列:“default/low”——满足网络请求和“background_queue”——运行后台进程,比如获取推文。我想在不同的 dyno 上运行“background
我是一名优秀的程序员,十分优秀!