c# - 有人可以用 C# 解释 map-reduce 吗？

Question

谁能解释一下 map-reduce 的概念，尤其是在 Mongo 中？

我也使用 C#，因此该领域的任何细节都会很有用。

Answer 1

理解来自 C# 和 LINQ 的 Map-Reduce 的一种方法是将其视为 SelectMany() 后跟 GroupBy() 后跟 Aggregate() 操作。

在 SelectMany() 中，您正在投影一个序列，但每个元素都可以成为多个元素。这相当于在 map 操作中使用多个 emit 语句。 map 操作也可以选择不调用 emit，这就像在 SelectMany() 操作中有一个 Where() 子句一样。

在 GroupBy() 中，您正在收集具有相同键的元素，这与 Map-Reduce 对您从 map 操作发出的键值所做的操作相同。

在 Aggregate() 或 reduce 步骤中，您将获取与每个组键关联的集合，并以某种方式将它们组合起来，为每个键生成一个结果。通常这种组合只是简单地将映射步骤中的每个键与单个“1”值输出相加，但有时会更复杂。

MongoDB 的 map-reduce 的一个重要警告是，reduce 操作必须接受和输出相同的数据类型，因为它可能会重复应用于分组数据的部分集。如果您传递了一个值数组，请不要简单地获取它的长度，因为它可能是早期 reduce 操作的部分结果。