java - 查询内存中的文件

Question

我有一个逗号分隔的文件，我想将其加载到内存中并像数据库一样查询它，我遇到过许多概念/名称，但不确定哪个是正确的，例如...嵌入式数据库，内存数据库(Apache ignite 等)，我怎样才能实现这一点？

Answer 1

我建议使用 Apache Spark，您可以加载文件，然后使用 Spark-sql 查询它，如下所示:

val df = spark.read.format("csv").option("header", "true").load("csvfile.csv")
// Select only the "user_id" column
df.select("user_id").show()

参见link了解更多信息。