ruby-on-rails - 使用 CouchDB 与 Hadoop 存储/分析 Web 应用程序日志数据的优点是什么？

Question

我想在我的 Web 应用程序中不再使用纯 Rails 日志文件，这样我就可以分析页面浏览量和使用模式。我听说 CouchDB 有时用于此。

另一方面，我知道有些人只是将纯文本日志文件输入到 Hadoop 中，然后将它们简化为摘要统计信息，然后将其插入到 MySQL 中。

这两种记录和分析日志文件的方法各有什么优缺点？

Answer 1

我只能代表 CouchDB，但使用文档数据库存储这些东西的主要好处是；

• 它们没有架构，因此您可以更改日志条目的架构，并且仍然可以对您可能拥有的架构的各种版本执行查询。
• map/reduce 算法是进行分组查询的一种非常强大的方法。
• REST 接口(interface)使其在使用数据方面与技术无关。
• 缩放是水平的和“无限的”。