HBase2.0新特性之In-Memory Compaction

2018-03-29 599

In-Memory Compaction是HBase2.0中的重要特性之一，通过在内存中引入LSM结构，减少多余数据，实现降低flush频率和减小写放大的效果。本文根据HBase2.0中相关代码以及社区的讨论、博客，介绍In-Memory Compaction的使用和实现原理。

原理

概念和数据结构

In-Memory Compaction中引入了MemStore的一个新的实现类 CompactingMemStore 。顾名思义，这个类和默认memstore的区别在于实现了在内存中compaction。

CompactingMemStore中，数据以 segment 作为单位进行组织，一个memStore中包含多个segment。数据写入时首先进入一个被称为 active 的segment，这个segment是可修改的。当active满之

微信关注我们

原文链接：https://yq.aliyun.com/articles/573702

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

3月30日云栖精选夜读：三分钟，你想对世界说什么丨蚂蚁金服发起青年导演公益短片计划

如果只给你三到五分钟的时间，你想对世界说什么？今天，有七个年轻人给出了他们的答案。在「大于等于」短片季首映礼上，我们第一次看到了七位年轻的新锐导演的七部公益短片作品。他们向世界说出了自己的所思所想。热点热议三分钟，你想对世界说什么丨蚂蚁金服发起青年导演公益短片计划作者：技术小能手在阿里，我们如何管理代码分支？作者：云效平台阿里云云盾 · 智能风控产品免费测试开放：毫秒间，拥有非凡“智”力作者：技术小能手知识整理 Elasticsearch数据模型简介作者：少强 Docker学习之搭建MySql容器服务作者：小柒2012 搭建云服务器Hadoop集群作者：志鹏从 Elasticsearch 来看分布式系统架构设计作者：技术小能手 Mysql源码学习——Thread Manager 作者：xumaojun 美文回顾端上智能——深度学习模型压缩与加速作者：聒小小噪国内制造业向智能化转型工业机器人需求猛增作者：gunser Arm推出全新Mali GPU助力下一代新科技作者：gunser 离线计算成本节省的神兵利器作者：地听全面升级！从新品到爆款只隔...

2018-03-30

743

HBase read replicas 1.概述对于这个模块打算有几篇文章组成一个系列，详细的介绍这个功能，大概分read replicas综述（本文）、正常情况下的读写流程分析、异常情况下的读写流程分析；本文主要介绍的有：概述、读流程链路、写流程链路、如何使用read replicas，example。我们知道HBase是一个强一致的系统，最初是因为一个regionserver下负责的多个region的读写都是经历这个regionserver去做处理，这样的话，该regionserver是单点的做读写，不会存在数据不一致的问题。但是相应的该regionserver如果挂掉了，会造成该regionserver负责的region都不能提供服务。这个降低了整个流程的服务可用性。那么为了解决该问题，HBase引入了 R

2018-03-31

612

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

HBase2.0新特性之In-Memory Compaction

原理

概念和数据结构

3月30日云栖精选夜读：三分钟，你想对世界说什么丨蚂蚁金服发起青年导演公益短片计划

HBase read replicas 功能介绍系列

相关文章

发表评论

资源下载

Mario

Spring

Rocky Linux

Sublime Text

欢迎您来访！