千锋教育-做有情怀、有良心、有品质的职业教育机构

手机站
千锋教育

千锋学习站 | 随时随地免费学

千锋教育

扫一扫进入千锋手机站

领取全套视频
千锋教育

关注千锋学习站小程序
随时随地免费学习课程

当前位置:首页  >  技术干货  > HBase的Compact流程

HBase的Compact流程

来源:千锋教育
发布人:qyf
时间: 2022-08-25 17:46:00 1661420760

HBase的Compact流程

  在 HBase 中每当有 memstore 数据 flush 到磁盘之后,就形成一个 StoreFile,当 StoreFile 的数量达到一定程度后,就需要将 StoreFile 文件来进行 Compact 操作。Compact 的作用如下:

  * 清除过期,多余版本的数据。 * 合并文件,减少需要检索的文件数量,提高读数据的效率。

  HBase 中实现了两种 Compact 的方式:Minor 和 Major. 这两种 Compact 方式的区别是:

  * Minor 操作会获取相邻的部分小StoreFile来执行合并操作,不做清理多版本数据和删除数据的操作,尽量不影响集群的正常工作。 * Major 操作是对 Region下的Store的所有StoreFile执行合并操作,输出成一个StoreFile,这是一个比较耗费资源的操作,所以不宜频繁Major Compact。

  更多关于“大数据培训”的问题,欢迎咨询千锋教育在线名师。千锋教育多年办学,课程大纲紧跟企业需求,更科学更严谨,每年培养泛IT人才近2万人。不论你是零基础还是想提升,都可以找到适合的班型,千锋教育随时欢迎你来试听。

tags:
声明:本站稿件版权均属千锋教育所有,未经许可不得擅自转载。
10年以上业内强师集结,手把手带你蜕变精英
请您保持通讯畅通,专属学习老师24小时内将与您1V1沟通
免费领取
今日已有369人领取成功
刘同学 138****2860 刚刚成功领取
王同学 131****2015 刚刚成功领取
张同学 133****4652 刚刚成功领取
李同学 135****8607 刚刚成功领取
杨同学 132****5667 刚刚成功领取
岳同学 134****6652 刚刚成功领取
梁同学 157****2950 刚刚成功领取
刘同学 189****1015 刚刚成功领取
张同学 155****4678 刚刚成功领取
邹同学 139****2907 刚刚成功领取
董同学 138****2867 刚刚成功领取
周同学 136****3602 刚刚成功领取
相关推荐HOT