gpt4 book ai didi

apache-drill - Apache Drill 如何处理大结果集?

转载 作者:行者123 更新时间:2023-12-03 00:57:53 27 4
gpt4 key购买 nike

假设您将 Drill 连接到两个独立的数据库,并且运行一个查询,从每个数据库中提取大量数据,然后进行联接。

Drill 如何处理这个问题而不引发内存不足错误?这是假设您请求的数据超出了 Drill 可以使用的内存量。

最佳答案

请检查 Drill 文档中的以下内容。

Drill 可从一台笔记本电脑扩展到 1000 个节点的集群

Drill 可以简单下载,您可以在笔记本电脑上运行。当您准备好分析更大的数据集时,请在 Hadoop 集群(最多 1000 个商用服务器)上部署 Drill。 Drill 利用集群中的聚合内存使用乐观管道模型执行查询,并在工作集无法容纳在内存中时自动溢出到磁盘。

关于apache-drill - Apache Drill 如何处理大结果集?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/39418048/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com