- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我对可用的API和两个标识符感到困惑。
我正在使用boto,但不要认为这是问题所在:我的问题涉及任何api(但不涉及cli)。
我用RunJobFlow启动了一个JobFlow,它返回了一个JobFlowId。假设我不想保留该数字,而是稍后查找JobFlows正在运行哪些操作以向其添加步骤。
我认为我应该能够使用DescribeJobFlows查找所有jobflow_id,然后从那里继续。但是在文档(http://docs.aws.amazon.com/ElasticMapReduce/latest/API/API_DescribeJobFlows.html)上,此api调用被标记为已弃用,并指示我们使用ListClusters,它返回cluster_ids。
两者之间有什么联系?标识符相同吗?如果不是,如何从集群ID获取作业流ID?
我认为,在cli上,该命令是“ create-cluster”并且返回cluster_id,而添加步骤也需要cluster_id的事实,也造成了混乱。
最佳答案
集群ID和作业流ID是同一事物(j-######)。集群ID是更适合其用途的名称,以免与Hadoop所看到的作业的术语混淆。因此,继续使用ListClusters(http://docs.aws.amazon.com/ElasticMapReduce/latest/API/API_ListClusters.html)。
关于amazon-web-services - AWS EMR上的ClusterID与JobFlowID,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/31243788/
我检查了这个站点中的解决方案。 我去(hadoop文件夹)/data/dfs/datanode改了ID。 但是,datanode文件夹中没有任何东西。 我能做什么? 感谢阅读。 如果你能帮助我,我将不
尝试启动 hadoop 2.7.3 服务数据节点未启动: java.io.IOException: Incompatible clusterIDs in /opt/hadoop/tmp/dfs/dat
我正在安装 Hadoop 2.7.2(1 个主 NN -1 第二个 NN-3 数据节点)并且无法启动数据节点!!!在大声喊出日志(见下文)之后, fatal error 是由于 ClusterID 不
我有这个程序可以在 apache-spark 上打印 Kmeans 算法的 MSSE。生成了 20 个簇。我正在尝试打印 clusterID 和分配给相应 clusterID 的元素。我如何遍历 cl
我正在尝试运行一个简单的程序,将 rdd 的内容复制到 Hbase 表中。我正在使用 nerdammer 的 spark-hbase-connector https://github.com/nerd
我希望使 Azure 链接服务可配置,从而在运行时传递 Databricks WorkspaceURL 和 ClusterID。我将拥有多个 Spark 集群,并根据集群的大小,我将调用集群的类型/大
我是一名优秀的程序员,十分优秀!