ruby - 在服务器进程中创建工作线程是个坏主意吗？

Question

我的服务器进程基本上是一个响应 REST 请求的 API。

其中一些请求用于启动长时间运行的任务。

做这样的事情是个坏主意吗？

get "/crawl_the_web" do
  Thread.new do
    Crawler.new # this will take many many days to complete
  end
end

get "/status" do
  "going well" # this can be run while there are active Crawler threads
end

服务器每天处理的请求不会超过 1000 个。

Answer 1

不是最好的主意....

使用后台作业运行器来运行作业。

POST/crawl_the_web 应该只是将一个作业添加到作业队列中。后台作业运行器将定期检查队列中的新作业并按顺序执行它们。

例如，您可以使用 delayed_job为此，设置一个单独的进程来轮询和运行作业。如果你在 Heroku 上，你可以使用 the delayed_job feature在单独的后台 worker/dyno 中运行作业。