个人中心
文章发布
退出
作者热门文章
- html - 出于某种原因，IE8 对我的 Sass 文件中继承的 html5 CSS 不友好？
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景？
25
4
处理数据的模式是我有一个记录流，其中包含一些信息 A。这些记录由某个 ID 分片。这个信息A依赖于当前记录、之前计算的结果和一个大的查找表。查找表不会经常更改并且更改很小。我知道我可以使用 mapWithState/flatMapWithState 进行有状态计算。但是，我应该如何处理查找表？惯用的方法是也将其作为状态处理(如 A)，但查找表的大小可能对性能/内存来说是可怕的(例如，当快照时)
我目前正在考虑使其成为受读/写锁保护的共享资源。有没有更好的方法来处理这种模式？
最佳答案
正如您提到的，现在唯一可能的方法是使用状态。我们正在研究另一种方法。以下是我们的一些想法:https://docs.google.com/document/d/1hIgxi2Zchww_5fWUHLoYiXwSBXjv-M5eOv-MKQYN3m4/edit?usp=sharing
关于apache-flink - 如何处理 Apache Flink 中很少更新的大型查找表，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/37448847/
25
4
0
我有 python 应用程序，它需要每天执行大约 20 000 次专有应用程序(不时崩溃)。 问题是当应用程序崩溃时，Windows 会自动触发 WerFault这将使程序挂起，因此 python's
我弄清楚这里的问题是什么。很少(50 个数据中有 3 个)插入到数据库中的数据不完整，如下所示: 用于插入的 PHP 代码是正确的。数据库中没有值的所有值都来自 SELECT 标记 HTML(year
我有一个包含对象的列表，其中包含以下字段:完整、不完整、继续。我想根据这三个部分对我的列表进行排序。首先，我想添加 header: INCOMPLETE 和所有元素(如果此字段为真)。之后我想添加标题
我们有一个名为模型的包 在模型中，我们有一个 TopicM 模块，它定义了一个类 Topic我们将它导入同一个包中名为 GeneralM 的模块中。有时(很少)我们会收到此错误: 可能是什么原因？会不
通过简单地将 TextViews 文本设置为在代码中定义的字符串(永远不能是 null)我有时会得到一个 ArrayIndexOutOfBoundsException，这只发生在我的实时应用程序中，我
我在 NodeJS 中运行一个 restify 服务器。在极少数情况下，大约 0.05% 的 HTTPS 请求会导致 net.js 报告以下错误: Error: accept EPERM at
我不明白，为什么Eclipse更新变得如此不可靠？大约每次使用它时，我都会遇到一些问题! 例如，现在我遇到下面一堆谵妄。禁用“联系所有软件站点”没有帮助。 An error occurred whil
为了呈现一堆节点，每帧一个，直到它们都出现在屏幕上，我想在 update() 调用中做这样的事情。 警告，伪代码接近: update(){ switch presentNodes_inOrderOfA
此 NSPersistentStoreCoordinator 没有持久存储。它无法执行保存操作。 NSInternalInconsistencyException(SIGABRT) This NSPe
我是一名优秀的程序员,十分优秀！