hadoop - 水平载荷分布是什么意思？

Question

我在Hive中阅读了有关分区的article ，其中说:“在Hive中进行分区会水平分布执行负载”。

我对水平(而不是垂直)负载分配的含义感到好奇-如果这样做有意义。负载可以“垂直”分布吗？

Answer 1

在配置单元中，对表进行分区意味着要为相同类型的数据创建不同的目录。
例如
您有一个包含与城市相关的详细信息的数据，并且想要与城市相关的详细信息，那么假设为pune。

不带分区:
您只需要扫描整个表以查找与浦那相关的详细信息即可。

带分区:
如果在城市上创建了分区，则数据将分布在分区上，这意味着，例如，与pune相关的数据将进入pune分区，而当您尝试访问与pune相关的数据时，则不必扫描整个表。