HBase 数据结构是怎样的?

Johngo学长 HBase 63
  • RowKey
    与nosql数据库们一样,RowKey是用来检索记录的主键。访问HBASE table中的行,只有三种方式:
    • 通过单个RowKey访问(get)
    • 通过RowKey的range(正则)(like)
    • 全表扫描(scan)
      RowKey行键(RowKey)可以是任意字符串(最大⻓度是64KB,实际应用中⻓度一般为10-100bytes),在HBASE内部,RowKey保存为字节数组。存储时,数据按照RowKey的字典序(byte order)排序存储。设计RowKey时,要充分排序存储这个特性,将经常一起读取的行存储放到一起。(位置相关性)。
  • Column Family
    列族:HBASE表中的每个列,都归属于某个列族。列族是表的schema的一部分(而列不是),必须在使用表之前定义。列名都以列族作为前缀。例如 courses:history,courses:math都属于courses 这个列族。
  • Cell
    由{rowkey, column Family:columu, version}唯一确定的单元。cell中的数据是没有类型的,全部是字节码形式存贮。
    关键字:无类型、字节码
  • Time Stamp
    HBASE 中通过rowkey和columns确定的为一个存贮单元称为cell。每个 cell都保存着同一份数据的多个版本。版本通过时间戳来索引。时间戳的类型是64位整型。时间戳可以由HBASE(在数据写入时自动)赋值,此时时间戳是精确到毫秒的当前系统时间。时间戳也可以由客户显式赋值。如果应用程序要避免数据版本冲突,就必须自己生成具有唯一性的时间戳。每个 cell中,不同版本的数据按照时间倒序排序,即最新的数据排在最前面。
    为了避免数据存在过多版本造成的的管理(包括存贮和索引)负担,HBASE提供了两种数据版本回收方式。一是保存数据的最后n个版本,二是保存最近一段时间内的版本(比如最近七天)。用户可以针对每个列族进行设置。
  • 命名空间
    命名空间结构如下:
    1. Table:表,所有的表都是命名空间的成员,即表必属于某个命名空间,如果没有指定,则在default默认的命名空间中。
    2. RegionServergroup:一个命名空间包含了默认的RegionServerGroup。
    3. Permission:权限,命名空间能够让我们来定义访问控制列表ACL(AccessControlList)。例如,创建表,
    读取表,删除,更新等等操作。
    4. Quota:限额,可以强制一个命名空间可包含的region的数量。

回复

我来回复
  • 暂无回复内容

免费咨询
免费咨询
扫码关注
扫码关注
联系站长

站长Johngo!

大数据和算法重度研究者!

持续产出大数据、算法、LeetCode干货,以及业界好资源!

2022012703491714

微信来撩,免费咨询:xiaozhu_tec

分享本页
返回顶部