apache-spark - Spark Graphx 有像 Gephi 那样的可视化吗

Question

我是图形世界的新手。我被分配从事图形处理工作。现在知道了Apache Spark，于是想到用Graphx来处理大图。然后我发现 Gephi 提供了很好的 GUI 来操作图形。
Graphx 有没有这样的工具或者主要是并行图处理库。我可以将来自 Gephi 的 json 图形数据导入到 graphx 中吗？

Answer 1

除此之外，您还可以尝试 Graphlab
https://dato.com/products/create/open_source.html

它直接支持 Spark RDD
https://dato.com/learn/userguide/data_formats_and_sources/spark_integration.html

之后不需要太多工作

from pyspark import SparkContext
import graphlab as gl

sc = SparkContext('yarn-client')

t = sc.textFile("hdfs://some/large/file")
sf = gl.SFrame.from_rdd(t)

# do stuff...

out_rdd = sf.to_rdd(sc)