个人中心
文章发布
退出
作者热门文章
- android - RelativeLayout 背景可绘制重叠内容
- android - 如何链接 cpufeatures lib 以获取 native android 库？
- java - OnItemClickListener 不起作用，但 OnLongItemClickListener 在自定义 ListView 中起作用
- java - Android 文件转字符串
25
4
<分区>
我很难理解我将如何在 Apache spark 的 GraphX 中创建以下内容。我得到以下内容:
一个 hdfs 文件，其中包含以下形式的大量数据:
node: ConnectingNode1, ConnectingNode2..
例如:
123214: 521345, 235213, 657323
我需要以某种方式将这些数据存储在 EdgeRDD 中，以便我可以在 GraphX 中创建我的图表，但我不知道我将如何去做。
25
4
0
我想知道我可以对具有不同类型顶点的 GraphX 图进行建模吗？假设我有以下实体:产品、买方、卖方。我想形成一个以这些实体为顶点的图结构。 (例如:以图形方式显示卖家出售和买家购买的产品。) Grap
我有一个大图(几百万个顶点和边)。我想删除所有没有出边的顶点(和边)。我有一些有效的代码，但速度很慢，我需要多次执行。我确信我可以使用一些现有的 GraphX 方法来使其更快。 这是我的代码。 val
我有一个名为 list.txt 的 .txt 文件，其中包含格式为源和目标 URL 的列表 google.de/2011/10/Extract-host link.de/2011/10/e
在 GraphX 中，有没有办法检索特定长度路径上的所有节点和边？ 更具体地说，我想获得从 A 到 B 的所有 10 步路径。对于每条路径，我想获取节点和边的列表。 谢谢。 最佳答案 免责声明:这仅用
我正在尝试计算 spark graphx 图中的节点值总和。简而言之，图是一棵树，顶部节点(根)应该对所有子节点及其子节点求和。我的图实际上是一棵树，看起来像这样，预期总和值应为 1850 :
我无法处理具有 230M 边的图形。我克隆了 apache.spark，构建了它，然后在集群上进行了尝试。 我使用 Spark 独立集群: -5 machines (each has 12 cores
我在玩graphx。我已经建立了一个图表 我正在尝试更新关系的权重， import org.apache.spark.rdd.RDD import org.apache.spark.graphx._
是否可以在运行时查询 GraphX？或者必须编译和部署这些查询？ 如果是这样，是否有任何东西可以与 GraphX 的 Cypher 等价？ 谢谢 最佳答案 是的，这是可能的，但你必须看到 spark
我可以使用 vertexRDD 构建图表和一个 edgeRDD通过 GraphX API，没问题。 IE。: val graph: Graph[(String, Int), Int] = Graph(
我使用 Spark graphX 创建了一个图，其中每个顶点都直接连接到图的每个其他顶点，即完整图。如果有人可以针对此类情况提出良好的分区策略或任何实现自定义分区策略的想法，请提供。 我有 100 万
关闭。这个问题需要更多focused .它目前不接受答案。 想改进这个问题吗？ 更新问题，使其只关注一个问题 editing this post . 关闭 5 年前。 Improve this qu
我正在尝试使用连接的组件，但遇到缩放问题。我的这是我所拥有的 - // get vertices val vertices = stage_2.flatMap(x => GraphUtil.getVe
Spark 版本 1.6.1 创建 Edge 和 Vertex RDD val vertices_raw = sqlContext.read.json("vertices.json.gz") val
我正在尝试实现 topological sort使用 Spark's GraphX图书馆。 这是我到目前为止编写的代码: MyObject.scala import java.util.ArrayLi
我有一个 Spark Graphx 图，我想检查两个顶点之间是否存在边。 在 Spark Graphx 中执行此操作的首选方法是什么？ 更具体地说，我想计算一个列表中所有顶点之间的所有边到另一个列表中
我在 Spark 中创建了一个 GraphFrame，该图目前如下所示: 基本上，会有很多这样的子图，其中每个子图都将彼此断开。给定一个特定的节点 ID，我想在子图中找到所有其他节点。例如，如果给定节
我正在从 gz 创建一个图表压缩 json edge 的文件和 vertices类型。 我已将文件放在 dropbox 文件夹中 here 我加载并映射这些 json记录创建 vertices和 ed
我尝试使用 link 中的代码找到从单个源到 n 个顶点的最短路径 val graph: Graph[Long, Double] = GraphGenerators.logNormalGraph(
刚刚开始我对图形处理方法和工具的探索。我们基本上所做的 - 计算一些标准指标，例如页面排名、聚类系数、三角形计数、直径、连接性等。过去对 Octave 很满意，但是当我们开始处理具有 10^9 个节点
我想知道GraphX对Graph的内部遍历。 RDDS是基于顶点和边的遍历还是顺序遍历？例如给定一个图的顶点，我只想获取它的邻居而不是所有顶点的邻居？在这种情况下，GraphX 将如何遍历图形。 感谢
我是一名优秀的程序员,十分优秀！