其他分享
首页 > 其他分享> > 大数据之Hbase:StoreFile Compaction

大数据之Hbase:StoreFile Compaction

作者:互联网

目录

1.StoreFile Compaction

由于memstore每次刷写都会生成一个新的HFile,且同一个字段的不同版本(timestamp)和不同类型(Put/Delete)有可能会分布在不同的HFile中,因此查询时需要遍历所有的HFile。为了减少HFile的个数,以及清理掉过期和删除的数据,会进行StoreFile Compaction。
Compaction分为两种,分别是Minor Compaction和Major Compaction。
Minor Compaction会将临近的若干个较小的HFile合并成一个较大的HFile,并清理掉部分过期和删除的数据。
Major Compaction会将一个Store下的所有的HFile合并成一个大HFile,并且会清理掉所有过期和删除的数据。

在这里插入图片描述

标签:Major,过期,StoreFile,Compaction,Hbase,Minor,HFile
来源: https://blog.csdn.net/weixin_43597208/article/details/117712940