java - 什么是 hbase 压缩文件大小

Question

我最近读到，在 Hbase 主要压缩之后，如果存储文件的大小变得大于 hbase.hregion.max.filesize，即 256MB，那么它再次溢出到 2。所以谁能解释压缩是在什么文件上完成的尺寸。major compaction后形成的storefile会有多少列族的数据？

Answer 1

hbase.hregion.max.filesize 顾名思义，指的是区域大小。区域本质上是您的 hbase 数据的分区(存储为 hfile)。 HBase 会将您的数据存储到区域中，如果区域变得太大(太大由 hbase.hregion.max.filesize 定义)，将拆分该区域为两个地区。

一般来说，256MB 的区域大小相当小，大多数用例都需要更大的区域。确定确切的尺寸可能有点像黑暗艺术，但这里有引用:http://hbase.apache.org/book/ops.capacity.html#ops.capacity.regions .

在htable描述符中创建表时可以设置region大小

每个区域都应该有您的表定义的所有列族。为了进一步调整性能，您可以为每个列族指定一个 block 大小，这可能会影响扫描、获取和写入的性能。

您还可以查看此资源以获取配置提示: http://hbase.apache.org/book/important_configurations.html