gpt4 book ai didi

apache-spark - 如何将流数据集转换为 DStream?

转载 作者:行者123 更新时间:2023-12-01 10:22:31 24 4
gpt4 key购买 nike

是否可以将流式传输 o.a.s.sql.Dataset 转换为 DStream?如果是,怎么办?

我知道如何将它转换为 RDD,但它是在流式上下文中。

最佳答案

这是不可能的。 Structured Streaming 和遗留 Spark Streaming (DStreams) 使用完全不同的语义并且彼此不兼容,因此:

  • DStream 无法转换为 Streaming Dataset
  • 流式 Dataset 无法转换为 DStream

关于apache-spark - 如何将流数据集转换为 DStream?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/49559007/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com