gpt4 book ai didi

hazelcast - 在 hazelcast 中批量加载数据的最佳方法

转载 作者:行者123 更新时间:2023-12-02 23:22:55 27 4
gpt4 key购买 nike

我需要使用 csv/平面文件在 hazelcast 中加载 3 亿条记录(每条记录 60KB)。以最快的方式加载所有这些数据的最佳方法是什么?我可以逐条读取记录并在 hazelcast 中执行 map.put 操作。有没有一种方法可以在一个map.put中执行多次写入?或者有什么实用程序可以做到这一点?

最佳答案

除了 Chris 的评论之外,您还可以在 Hazelcast Simulator 代码库中找到异步加载器/流送器的示例。该代码用于在测试之前将数据加载到网格中。 AsyncMapStreamer 。作为一个选项,您可以使用 map.putAll 方法。但在这种情况下,您需要找到临时映射的最佳批量大小。

干杯,维克

关于hazelcast - 在 hazelcast 中批量加载数据的最佳方法,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/37432721/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com