HBase读写操作
读和写是Hbase的两种常见的基本操作,这两种操作都会涉及到Hfile和Meta表,我们依次看看
Hfile
HFile是Hbase在HDFS中存储数据的格式,它有如下特性:
- 主标识是一个行健
- key按照有序的方式进行存储
- HFile仅仅分配给一个Region
- 行存储在Hfile上面,通过排好序的KeyValue存储在磁盘上
- 当MemStore超过它的限制的时候,会新产生一个HFile
- 在搜索数据的时候,不需要加载整个Hfile,可以使用Hfile的多层索引
- HDFS复制WAL和Hfile块,并且这是自动的
- 在每个Hfile中,最高的序列号被存储为meta Field
Meta表
在读数据的时候,Hbase需要知道要访问那个Region Server,因此在读数据的时候需要通过Meta表。
- Meta表也是一张Hbase的表,但是内部是一系列Region的信息
- 它的结构如下:
- Key:Region起始的key,Region Id
- Value: RegionServer信息
首次读写
- 首先到ZooKeeper中找到meta表对应的Region Server地址
- 客户端再去RegionServer中,从meta表中获取对应rowkey位于哪个RegionServer上,客户端会缓存这个信息还有meta表的信息。
- 客户端从对应的RegionServer找到row。
后续的读过程,客户端会直接从之前缓存的Meta表中检索。


参考
HBase Operations: Read and Write Operations
HBase原理-数据读取流程解析
An In-Depth Look at the HBase Architecture
图解Hbase读取流程
一条数据的HBase之旅,简明HBase入门教程-Write全流程
网友评论