Ruby 网络蜘蛛和搜索引擎库

Question

我正在寻找一个 Ruby 库或 gem(或一组 gem)，它不仅可以进行抓取，还可以将数据收集到数据库中，并允许对数据进行基本搜索(即典型的网络搜索)。

我发现了几个爬取库，所以这部分似乎涵盖得很好(我打算先尝试 Anemone)，但我找不到任何可以获取爬取数据并允许对其进行查询的东西。由于缺少现成的，我打算自己用 Anemone 写一些东西。

有什么建议吗？

Answer 1

那个blog post可能会给你一些指示。另外，查看 ferret对于搜索部分。