java - Apache Spark 中 RowMatrix 和 Matrix 的区别？

Question

我想知道 Apache Spark 中可用的 RowMatrix 和 Matrix 类之间的基本区别。

Answer 1

这里有一个更精确的问题是 mllib.linalg.Matrix 和 mllib.linalg.distributed.DistributedMatrix 之间有什么区别。

• Matrix是一个特征，表示驻留在单个机器内存中的局部矩阵。目前有两种基本实现:DenseMatrix 和 SparseMatrix。
• DistributedMatrix是一个特征，表示构建在RDD之上的分布式矩阵。 RowMatrix是 DistributedMatrix 的子类，它以行方式存储数据，没有有意义的行排序。 DistributedMatrix 还有其他实现(例如 IndexedRowMatrix、CooperativeMatrix 和 BlockMatrix)，每个实现都有自己的存储策略和特定的存储策略。方法集。例如，参见Matrix Multiplication in Apache Spark