gpt4 book ai didi

apache-flink - 链接映射状态大小和键数

转载 作者:行者123 更新时间:2023-12-04 05:14:13 28 4
gpt4 key购买 nike

我想知道是否有办法检索存储在状态后端中的总状态大小。

我目前正在使用 flink 1.3,在 emr 和 Rocksdb 后端之上,具有异步检查点和增量检查点。

“检查点”下的 flink 仪表板显示状态大小,但我认为由于我使用增量检查点,我在检查点历史记录页面中看到状态大小的波动。

我目前使用的唯一方法(我不确定是否合适)是在 hdfs 检查点位置使用“ls”命令。

我认为有更好的方法,并感谢您的帮助

最佳答案

目前可以帮助您解决问题的一件事是 Queryable State这允许您基本上查询运算符的状态。但是它不能通过 WEB-UI 使用,但您需要为此创建一个单独的可查询状态客户端。更多信息请见here

关于apache-flink - 链接映射状态大小和键数,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/45758912/

28 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com