Hbase读写流程和寻址机制

客官°小女子只卖身不卖艺 2022-10-02 12:48 192阅读 0赞

### **写操作流程** ###

(1) Client通过Zookeeper的调度，向RegionServer发出写数据请求，在Region中写数据。

(2) 数据被写入Region的MemStore，直到MemStore达到预设阈值。

(3) MemStore中的数据被Flush成一个StoreFile。

(4) 随着StoreFile文件的不断增多，当其数量增长到一定阈值后，触发Compact合并操作，将多个StoreFile合并成一个StoreFile，同时进行版本合并和数据删除。

(5) StoreFiles通过不断的Compact合并操作，逐步形成越来越大的StoreFile。

(6) 单个StoreFile大小超过一定阈值后，触发Split操作，把当前Region Split成2个新的Region。父Region会下线，新Split出的2个子Region会被HMaster分配到相应的RegionServer上，使得原先1个Region的压力得以分流到2个Region上。

可以看出HBase只有增添数据，所有的更新和删除操作都是在后续的Compact历程中举行的，使得用户的写操作只要进入内存就可以立刻返回，实现了HBase I/O的高机能。

### **读操作流程** ###

(1) Client访问Zookeeper，查找-ROOT-表，获取.META.表信息。

(2) 从.META.表查找，获取存放目标数据的Region信息，从而找到对应的RegionServer。

(3) 通过RegionServer获取需要查找的数据。

(4) Regionserver的内存分为MemStore和BlockCache两部分，MemStore主要用于写数据，BlockCache主要用于读数据。读请求先到MemStore中查数据，查不到就到BlockCache中查，再查不到就会到StoreFile上读，并把读的结果放入BlockCache。

**寻址过程：client-->Zookeeper-->-ROOT-表-->.META.表-->RegionServer-->Region-->client**

**Hbase寻址机制**

**![1402378-20181210214717934-760293145.png][]**

转载于：

[https://www.cnblogs.com/dummyly/p/10099395.html][https_www.cnblogs.com_dummyly_p_10099395.html]

[1402378-20181210214717934-760293145.png]: /images/20220112/8c456497ba964c4198505dd8257eb3e6.png
[https_www.cnblogs.com_dummyly_p_10099395.html]: https://www.cnblogs.com/dummyly/p/10099395.html

发表评论取消回复

表情：

评论列表（有 0 条评论，192人围观）

还没有评论，来说两句吧...

相关阅读

相关驱动开发：内核物理内存寻址读写

在某些时候我们需要读写的进程可能存在虚拟内存保护机制，在该机制下用户的`CR3`以及`MDL`读写将直接失效，从而导致无法读取到正确的数据，本章我们将继续研究如何实现物理级别的

傷城~/ 2024年03月17日 12:59/ 0 赞/ 71 阅读

相关 Hbase读写流程

Hbase读写流程一、写数据流程 ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_a

Love The Way You Lie/ 2023年01月08日 10:24/ 0 赞/ 148 阅读

相关计组之指令系统：2、指令寻址与数据寻址(直接寻址、间接寻址、寄存器寻址、寄存器间接寻址、隐含寻址、基址寻址、变址寻址、相对寻址、堆栈寻址)

2、指令寻址与数据寻址指令寻址思维导图顺序寻址跳跃寻址数据寻址直接寻址间接寻址

以你之姓@/ 2022年12月15日 11:16/ 0 赞/ 255 阅读

相关 Hbase读写流程和寻址机制

写操作流程 (1) Client通过Zookeeper的调度，向RegionServer发出写数据请求，在Region中写数据。 (2) 数据被写入Region的Mem

客官°小女子只卖身不卖艺/ 2022年10月02日 12:48/ 0 赞/ 193 阅读

相关 HBase：HBase架构及读写流程

本篇博文从分析HBase架构开始，首先从架构中各个组成部分开始，接着从HBase写入过程角度入手，分析HFile的Compaction合并、Region的Split分裂过程及触

深碍√TFBOYSˉ_/ 2022年10月02日 10:51/ 0 赞/ 230 阅读

相关 Linux内存寻址之分段机制

前言 -------------------- 最近在学习Linux内核，读到《深入理解Linux内核》的内存寻址一章。原本以为自己对分段分页机制已经理解了，结果发现其

蔚落/ 2022年09月24日 11:28/ 0 赞/ 251 阅读

相关关于汇编语言中的立即寻址和直接寻址

在 80x86 汇编语言中，立即寻址和直接寻址的格式有些相似，区别就在于 \[ \] 的有无。看看下面两行： MOV AX, 1000 MOV A

快来打我*/ 2022年08月20日 01:16/ 0 赞/ 263 阅读

相关 CPU寻址范围（寻址空间）

一、什么叫寻址空间？寻址空间一般指的是CPU对于内存寻址的能力。通俗地说，就是能最多用到多少内存的一个问题。数据在存储器(RAM)中存放是有规律的，CP

矫情吗；*/ 2022年08月06日 13:03/ 0 赞/ 323 阅读

相关 [Hbase]HBase架构详解和数据的读写流程

HBase架构图理解 ![Image 1][] 18.png 1. HMaster链接Zookeeper的目得：HMaster需要知道哪些HRegionServer

た入场券/ 2022年05月08日 00:06/ 0 赞/ 297 阅读

相关 HBase（一）HBase的读写流程

> Region是HBase数据存储和管理的基本单位。在HBase的一个表中，可以包含一个或多个region。对于一个region，每个列族都会对应一个store，用来存储该列

谁践踏了优雅/ 2021年11月08日 19:16/ 0 赞/ 412 阅读