網(wǎng)站首頁(yè) 編程語(yǔ)言 正文
HBase是運(yùn)行在Hadoop集群上的一個(gè)數(shù)據(jù)庫(kù),與傳統(tǒng)的數(shù)據(jù)庫(kù)有嚴(yán)格的ACID(原子性、一致性、隔離性、持久性)要求不一樣,HBase降低了這些要求從而獲得更好的擴(kuò)展性,它更適合存儲(chǔ)一些非結(jié)構(gòu)化和半結(jié)構(gòu)化的數(shù)據(jù)。
下面給大家詳細(xì)介紹HBase表的數(shù)據(jù)模型,內(nèi)容如下所示:
表(Table)
HBase 中的數(shù)據(jù)以表的形式存儲(chǔ)。同一個(gè)表中的數(shù)據(jù)通常是相關(guān)的,使用表主要是可以把某些列組織起來一起訪問。表名作為 HDFS 存儲(chǔ)路徑的一部分來使用,在 HDFS 中可以看到每個(gè)表名都作為獨(dú)立的目錄結(jié)構(gòu)。
HBase表的數(shù)據(jù)模型主要概念包括rowkey、Column Family、Column、cell、Timestamp。
1. rowkey行鍵
- table的主鍵,table中的記錄==按照rowkey 的字典序進(jìn)行排序==
- rowkey行鍵可以是任意字符串(最大長(zhǎng)度是 64KB,實(shí)際應(yīng)用中長(zhǎng)度一般為 10-100bytes)
2. Column Family列族
- 被稱為列族或列簇
- HBase表中的每個(gè)列,都?xì)w屬與某個(gè)列族
- 列族是表的schema的一部分(而列不是),即建表時(shí)至少指定一個(gè)列族
- 比如創(chuàng)建一張表,名為
user
,有兩個(gè)列族,分別是userInfo
和addressInfo
,建表語(yǔ)句create 'user', 'userInfo', 'addressInfo'
3. Column列
- 列肯定是表的某一列族下的一個(gè)列,用
列族名:列名
表示,如userInfo
列族下的name
列,表示為userInfo:name
- 它屬于某一個(gè)ColumnFamily,類似于我們mysql當(dāng)中創(chuàng)建的具體的列
4. cell單元格
知道row key行鍵、列族、列,可以確定的一個(gè)cell單元格
cell中的數(shù)據(jù)是沒有類型的,全部是以字節(jié)數(shù)組進(jìn)行存儲(chǔ)
5. Timestamp時(shí)間戳
- 可以對(duì)表中的Cell多次賦值,每次賦值操作時(shí)的時(shí)間戳timestamp,可看成Cell值的版本號(hào)version number
- 即一個(gè)Cell可以有多個(gè)版本的值
理解數(shù)據(jù)模型各概念的圖
上表展示的是 HBase 中的用戶信息表 user,有三行記錄和兩個(gè)列族(不考慮空白的列族,代表可以有很多列族),行鍵分別為 1、2 和 3,兩個(gè)列族分別為 userInfo 和 addressInfo,每個(gè)列族中含有若干列,如列族 userInfo 包括 name、age、sex 3列,列族 addressInfo 包括 address、from、phone、email、ralary 5列。
在 HBase 中,列不是固定的表結(jié)構(gòu),在創(chuàng)建表時(shí),不需要預(yù)先定義列名,可以在插入數(shù)據(jù)時(shí)臨時(shí)創(chuàng)建。
從表的邏輯模型來看,HBase 表與關(guān)系型數(shù)據(jù)庫(kù)中的表結(jié)構(gòu)之間好像沒什么差別,只不過多了列族的概念。但實(shí)際上是有很大差別的,關(guān)系型數(shù)據(jù)庫(kù)中表的結(jié)構(gòu)需要預(yù)先定義,如:列名及其數(shù)據(jù)類型和值域等內(nèi)容。
當(dāng)需要添加新列,則需要修改表結(jié)構(gòu),這會(huì)對(duì)已有的數(shù)據(jù)產(chǎn)生很大影響。同時(shí),關(guān)系型數(shù)據(jù)庫(kù)中的表為每個(gè)列預(yù)留了存儲(chǔ)空間,即表中的空白 Cell 數(shù)據(jù)在關(guān)系型數(shù)據(jù)庫(kù)中以“NULL”值占用存儲(chǔ)空間。因此,對(duì)稀疏數(shù)據(jù)來說,關(guān)系型數(shù)據(jù)庫(kù)表中就會(huì)產(chǎn)生很多“NULL”值,消耗大量的存儲(chǔ)空間。
與面向行存儲(chǔ)的關(guān)系型數(shù)據(jù)庫(kù)不同,HBase 是面向列存儲(chǔ)的,且在實(shí)際的物理存儲(chǔ)中,列族是分開存儲(chǔ)的,即表中的用戶信息表將被存儲(chǔ)為 userInfo 和 addressInfo 兩個(gè)部分。
同時(shí)HBase存在時(shí)間戳,可以多次對(duì)一個(gè)cell賦值,可以存儲(chǔ)多個(gè)版本的值,如上表中rowkey為1的數(shù)據(jù)存儲(chǔ)了2個(gè)時(shí)間版本的數(shù)據(jù)。
原文鏈接:https://juejin.cn/post/7098597812081786916
相關(guān)推薦
- 2023-07-25 使用Http請(qǐng)求調(diào)用第三方API
- 2022-07-03 Qt讀寫ini文件之QSettings用法_C 語(yǔ)言
- 2022-05-12 前端在線預(yù)覽 tiff 格式的圖片
- 2023-10-14 【c++】四舍五入
- 2022-07-19 Linux手工配置靜態(tài)ip地址
- 2022-09-16 Kubernetes教程之Windows?HostProcess?運(yùn)行容器化負(fù)載_云其它
- 2022-09-19 Android實(shí)現(xiàn)斷點(diǎn)續(xù)傳功能_Android
- 2024-03-20 錯(cuò)誤code128:npm ERR! An unknown git error occurred c
- 最近更新
-
- window11 系統(tǒng)安裝 yarn
- 超詳細(xì)win安裝深度學(xué)習(xí)環(huán)境2025年最新版(
- Linux 中運(yùn)行的top命令 怎么退出?
- MySQL 中decimal 的用法? 存儲(chǔ)小
- get 、set 、toString 方法的使
- @Resource和 @Autowired注解
- Java基礎(chǔ)操作-- 運(yùn)算符,流程控制 Flo
- 1. Int 和Integer 的區(qū)別,Jav
- spring @retryable不生效的一種
- Spring Security之認(rèn)證信息的處理
- Spring Security之認(rèn)證過濾器
- Spring Security概述快速入門
- Spring Security之配置體系
- 【SpringBoot】SpringCache
- Spring Security之基于方法配置權(quán)
- redisson分布式鎖中waittime的設(shè)
- maven:解決release錯(cuò)誤:Artif
- restTemplate使用總結(jié)
- Spring Security之安全異常處理
- MybatisPlus優(yōu)雅實(shí)現(xiàn)加密?
- Spring ioc容器與Bean的生命周期。
- 【探索SpringCloud】服務(wù)發(fā)現(xiàn)-Nac
- Spring Security之基于HttpR
- Redis 底層數(shù)據(jù)結(jié)構(gòu)-簡(jiǎn)單動(dòng)態(tài)字符串(SD
- arthas操作spring被代理目標(biāo)對(duì)象命令
- Spring中的單例模式應(yīng)用詳解
- 聊聊消息隊(duì)列,發(fā)送消息的4種方式
- bootspring第三方資源配置管理
- GIT同步修改后的遠(yuǎn)程分支