0%

HBase数据结构

HBase数据结构

命名空间NameSpace

HBase的命名空间类似于mysql中的database,一个mysql下可以有多个database,同样的一个HBase下也可以有多个命名空间,命名空间中包括

  • Table表,所有的表都是命名空间的成员,即表必属于某个命名空间,如果没有指定,则在default默认的命名空间中。
  • RegionServer group,一个命名空间包含了默认的RegionServer Group。
  • Permission权限,命名空间能够让我们来定义访问控制列表ACL(Access Control List)。例如,创建表,读取表,删除,更新等等操作。
  • Quota限额,可以强制一个命名空间可包含的region的数量。

RowKey

RowKey是用来检索记录的主键。访问HBASE table中的行,只有三种方式:

  • 通过单个RowKey访问

  • 通过RowKey的range(正则)

  • 全表扫描

RowKey行键 (RowKey)可以是任意字符串(最大长度是64KB,实际应用中长度一般为 10-100bytes),在HBASE内部,RowKey保存为字节数组。存储时,数据按照RowKey的字典序(byte order)排序存储。设计RowKey时,要充分排序存储这个特性,将经常一起读取的行存储放到一起。(位置相关性)

Column Family

列族:HBASE表中的每个列,都归属于某个列族。列族是表的schema的一部分(而列不是),必须在使用表之前定义。列名都以列族作为前缀。例如 info:name,info:sex都属于info 这个列族。

HBASE把同一列族的数据存储在同一个目录下,由几个文件保存

磁盘上一个列族下所有的单元格都存储在一个storeFile中,不同列族的单元格不会出现在同一个storeFile中

Cell

由{rowkey, column Family:column, version} 唯一确定的单元。cell中的数据是没有类型的,全部是字节码形式存贮。

Time Stamp

HBASE 中通过rowkey和columns确定的为一个存贮单元称为cell。每个 cell都保存 着同一份数据的多个版本。版本通过时间戳来索引。时间戳的类型是 64位整型。时间戳可以由HBASE(在数据写入时自动 )赋值,此时时间戳是精确到毫秒 的当前系统时间。时间戳也可以由客户显式赋值。如果应用程序要避免数据版 本冲突,就必须自己生成具有唯一性的时间戳。每个 cell中,不同版本的数据按照时间倒序排序,即最新的数据排在最前面。
为了避免数据存在过多版本造成的的管理 (包括存贮和索引)负担,HBASE提供 了两种数据版本回收方式。一是保存数据的最后n个版本,二是保存最近一段 时间内的版本(比如最近七天)。用户可以针对每个列族进行设置。

表结构

欢迎关注我的其它发布渠道