ruby-on-rails - 写入缓存与写入数据库 - 性能基准？

Question

我有一个 Ruby on Rails 应用程序，每分钟大约需要 10000 个请求。其中一些请求执行对数据库表的写入。数据库最大连接数为200。

我想知道什么更有效率。一次写入缓存中的数组并在后台保存数据，还是将每个请求直接保存到数据库？如果我将数据写入缓存中的数组，是否存在竞争条件或性能问题？有没有更好的方法来优化性能和避免数据库瓶颈？

示例代码

 #...
  def self.add_data_message_to_queue(event_id, chat_item)
    bucket_name = 'BUCKET_GET_CHAT_' + event_id.to_s
    chat_queue = Rails.cache.fetch(bucket_name)
    if chat_queue.blank?
      chat_queue = []
    end
    chat_queue.push(chat_item)
    Rails.cache.write(bucket_name, chat_queue, expires_in:Integer(30).days)
  end

• 服务器: unicorn (高并发)

提前致谢

Answer 1

解决方案

根据基准测试，写入内存缓存的效率更高。尽管有必要处理竞争条件。根据 memcachier 团队的反馈。

测试将聊天消息保存到数据库

相同的测试 - 不将聊天消息保存到当前数据库

响应时间要好得多。该应用每分钟也可以处理更多请求。

处理竞争条件*(来自 memcachier 团队的反馈)

一般来说，有两种方法可以在内存缓存中解决这个问题:

由于您要追加到数组，因此您可以改用内存缓存的 APPEND 和 PREPEND 操作。 Rails.cache 不支持它们，但底层库 Dalli 支持这些命令。它们的语义是它们将向现有值附加/添加一个字符串。当你获取值时，你会得到所有你“附加”的字符串连接在一起，所以你必须，例如，用分号或类似的东西分隔每个元素以将它分解成一个数组。

一个更通用的解决方案(适用于任何数据竞争条件)是使用内存缓存中的版本控制支持。具体来说，memcache 中的每个值都分配有一个版本，该版本在任何 get 请求中返回。内存缓存中的设置操作可以采用可选的 CAS(用于比较和交换)字段，这样只有版本与存储的当前值匹配时操作才会成功。同样，我相信 Rails.cache 不支持这一点，但 Dalli 通过 cas 方法支持:

cache.add("bucket_get_chat", [])
while(!cache.cas("bucket_get_chat") {|val| val.push(chat_item)}); end