java - 对于给定的一大组数据的操作，有没有办法确定数据是否可以分解为mapreduce操作？

Question

我们对大量数据进行统计等。现在这一切都在一台机器上完成。我们正在研究转向映射缩减范例的可行性，在该范例中，我们将数据分解为子集，对其运行一些操作，然后组合结果。

是否有任何类型的数学测试可以应用于一组操作，以确定它们所操作的数据是否可以分解？

或者也许是某个地方的列表，说明什么可以分解，什么不能分解？

例如，我认为没有办法分解标准差，但有......

编辑:添加标签

Answer 1

看看这篇论文:http://www.janinebennett.org/index_files/ParallelStatisticsAlgorithms.pdf 。他们拥有针对许多常见统计问题的算法，并且有可用的开源代码。