網站首頁 編程語言 正文
文章目錄
- 源碼
- KeyValue結構
- KeyValue的實現
- 操作KeyValue
源碼
- 源碼注釋部分翻譯
HBase 鍵值。這是基本的 HBase 類型。
KeyValue 包裝一個字節數組,并將偏移量和長度放入傳遞的數組中,從哪里開始將內容解釋為 KeyValue。
字節數組中的 KeyValue 格式為: <keylength> <valuelength> <key> <value>
Key 進一步分解為: <rowlength> <row> <columnfamilylength> <columnfamily> <columnqualifier> <timestamp> <keytype>
行長最大值為 Short.MAX_SIZE,
列族長度最大值為 Byte.MAX_SIZE,
列限定符 + 鍵長度必須 < Integer.MAX_SIZE。
該列不包含 familyqualifier 分隔符 COLUMN_FAMILY_DELIMITER
KeyValue結構
- 在KeyValue中,其中的KeyLength為4B:
- ValueLength標識Value在字節數組中所占的長度,為4B:
- Row Length:存儲rowkey的長度,為2B
- TimeStamp是Long型,肯定就是占8B:
- KeyType為1B:
從ColumnQualifier開始內容前面不在帶有長度了。TimeStamp和KeyType因為所占的長度是固定的,所以不用包含長度信息。而Qualifier的長度信息,則用以下的方式可以得出:
new Ordering[(ImmutableBytesWritable, KeyValue)] {
override def compare(x: (ImmutableBytesWritable, KeyValue), y: (ImmutableBytesWritable, KeyValue)): Int = {
x._2.getFamilyLength()
x._2.getQualifierLength
}
}
KeyValue的實現
在Hbase中,所有數據都是以Byte的形式存在的。在KeyValue中,使用的是byte數組來存儲實際內容。
// KeyValue core instance fields.
private byte [] bytes = null; // an immutable byte array that contains the KV
private int offset = 0; // offset into bytes buffer KV starts at
private int length = 0; // length of the KV starting from offset.
其中,bytes數組用來存儲KeyValue中的實際內容,offset表示KeyValue在數組bytes中的起始位置
,length則是KeyValue在數組bytes中自起始位置offset后的長度
。
KeyValue提供了一系列的Offset方法在數組中定位各個字段的的起始位置,如getValueOffset,getRowOffset等。也提供了一系列的length方法來獲取KeyValue中各個字段的大小。
操作KeyValue
把keyValue 數據取出放到Map里
Map<String, Object> stringMap = new HashMap<>();
stringMap.put("row", Bytes.toStringBinary(getRowArray(), getRowOffset(), getRowLength()));
stringMap.put("family",Bytes.toStringBinary(getFamilyArray(), getFamilyOffset(), getFamilyLength()));
stringMap.put("qualifier",Bytes.toStringBinary(getQualifierArray(), getQualifierOffset(), getQualifierLength()));
stringMap.put("timestamp", getTimestamp());
stringMap.put("vlen", getValueLength());
Iterator<Tag> tags = getTags();
if (tags != null) {
List<String> tagsString = new ArrayList<String>();
while (tags.hasNext()) {
tagsString.add(tags.next().toString());
}
stringMap.put("tag", tagsString);
}
原文鏈接:https://blog.csdn.net/Lzx116/article/details/126609986
相關推薦
- 2022-09-03 Python?pandas找出、刪除重復的數據實例_python
- 2022-09-25 如何查看Redis的host和port
- 2022-05-10 原生ajax 在服務器響應前撤銷請求
- 2022-11-07 python多進程使用apply_async的使用方法詳解_python
- 2021-12-15 CentOS下更新SQLite版本_SQLite
- 2022-09-15 Kotlin創建一個好用的協程作用域_Android
- 2022-06-02 JQuery實現動態漂浮廣告_jquery
- 2022-08-14 使用Composing?builds提升Android編譯速度_Android
- 最近更新
-
- window11 系統安裝 yarn
- 超詳細win安裝深度學習環境2025年最新版(
- Linux 中運行的top命令 怎么退出?
- MySQL 中decimal 的用法? 存儲小
- get 、set 、toString 方法的使
- @Resource和 @Autowired注解
- Java基礎操作-- 運算符,流程控制 Flo
- 1. Int 和Integer 的區別,Jav
- spring @retryable不生效的一種
- Spring Security之認證信息的處理
- Spring Security之認證過濾器
- Spring Security概述快速入門
- Spring Security之配置體系
- 【SpringBoot】SpringCache
- Spring Security之基于方法配置權
- redisson分布式鎖中waittime的設
- maven:解決release錯誤:Artif
- restTemplate使用總結
- Spring Security之安全異常處理
- MybatisPlus優雅實現加密?
- Spring ioc容器與Bean的生命周期。
- 【探索SpringCloud】服務發現-Nac
- Spring Security之基于HttpR
- Redis 底層數據結構-簡單動態字符串(SD
- arthas操作spring被代理目標對象命令
- Spring中的單例模式應用詳解
- 聊聊消息隊列,發送消息的4種方式
- bootspring第三方資源配置管理
- GIT同步修改后的遠程分支