apache-spark - Spark的Row和InternalRow类型之间的区别

Question

目前，Spark有两种Row的实现:

import org.apache.spark.sql.Row
import org.apache.spark.sql.catalyst.InternalRow

两者都需要什么？它们是否代表相同的编码实体，但是一个内部使用(内部API)，另一个内部使用？

Answer 1

Row是(很好..)行的稳定版本实现。但是，InternalRow听起来很象名字，将在Spark SQL内部使用。我在下面引用了InternalRow的文档:

/**
 * An abstract class for row used internally in Spark SQL, which only contains the columns as
 * internal types.
 */
abstract class InternalRow extends SpecializedGetters with Serializable {