ruby-on-rails - 如何防止我的 Rails 查询耗尽内存

Question

我正在通过 sshing 连接到运行我的 Rails 应用程序的服务器以运行查询。尽管使用了 find_each，服务器的内存还是被我的控制台 session 占用了，我不确定为什么。 Based on this SO answer ，我还使用 ActiveRecord::Base.uncached 来防止 ActiveRecord 缓存所有对象并耗尽内存。

编辑: 想通了，感谢 @user2864740 和 Micah Fivecoate。问题在于将任务发送到 Resque，我正在使用 Resque Delayable gem(请参阅下面的答案)。

这是我正在做的:

ssh cron.ec2.company-name.com
cd /var/www/company-name.com/current; bundle exec rails console production

然后，在控制台中:

ActiveRecord::Base.uncached do
  ModelObject.find_each do |obj|
    a = AnotherModelObject.find_by_model_id(obj.id)
    a ||= AnotherModelObject.create!(obj.id)
    a.send_task_to_resque
  end
end

一旦我结束 SSH session ，内存就会被释放。

我在 Linux 上运行 Rails 3.2.15 和 ruby​​ 1.9.3p327。

我正在获取通过 SSH session 发回给我的所有 SQL 查询的文本——也许这些文本保存在内存中或其他什么地方？接下来我可能会尝试使用 conf.echo = false 和 ActiveRecord::Base.logger.level = 1。 编辑:这没有解决内存使用问题

Answer 1

问题在于向 Resque 发送任务。感谢@user2864740 提出这个想法。

首先，我使用一个空的 find_each block 进行了测试，这并没有导致内存增长。然后我尝试了一个 find_each block ，它创建了一个 ActiveRecord 对象，并且没有导致内存增长。

最后，我测试了对记录执行 find_each 并发送任务以重新请求。光是这一点，就让内存稳步攀升不跌。我还应该提到我正在使用 ResqueDelayable gem 派发任务到 resque，它可能受此影响。