[發明專利]基于HBase數據庫的時序數據的存儲方法及裝置

在審

• 申請號: 201911302237.4
• 申請日: 2019-12-17
• 公開（公告）號: CN111078753A
• 公開（公告）日: 2020-04-28
• 發明（設計）人: 李東;馬鵬程
• 申請（專利權）人: 聯想（北京）有限公司
• 主分類號: G06F16/2458
• 分類號: G06F16/2458;G06F16/22
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 王歡

1.一種基于HBase數據庫的時序數據的處理方法，包括：

獲取時序數據，所述時序數據包括時間信息、數據類型和數據信息；

將所述時間信息和所述數據類型存儲為具有第一長度的key；

對所述數據信息進行編碼操作，得到編碼數據；

確定所述編碼數據的長度值；

將所述長度值和所述編碼數據存儲為value；

依據所述key和所述value確定所述時序數據的存儲數據。

2.根據權利要求1所述的處理方法，所述對所述數據信息進行編碼操作，得到編碼數據，包括：

對所述數據信息進行二進制編碼，得到數據編碼。

3.根據權利要求2所述的處理方法，所述將所述長度值和所述數據編碼存儲為value前，還包括：

將所述長度值進行Varint編碼，得到長度編碼；

則所述將所述長度值和所述數據編碼存儲為value，包括：

將所述長度編碼和所述數據編碼拼接到一起存儲為value。

4.根據權利要求1所述的處理方法，所述將所述時間信息和所述數據類型存儲為具有第一長度的key，包括：

將所述時間信息和所述數據類型的枚舉值存儲為具有固定長度的key。

5.根據權利要求1所述的處理方法，還包括：

將預設時間周期中的存儲數據存儲在一行，并為該行中的每一個存儲數據設置相同的Rowkey。

6.根據權利要求5所述的處理方法，還包括：

對同一行的所有存儲數據進行壓縮處理；

所述壓縮處理包括：

將同一行的所有存儲數據的key合并為壓縮key，并將同一行的所有存儲數據的value合并為壓縮value，得到壓縮處理數據。

7.根據權利要求6所述的處理方法，還包括：

對所述壓縮處理數據進行解壓縮操作；

所述解壓縮操作包括：將所述壓縮key分為多個具有第一長度的key；依據所述多個具有第一長度的key的位置順序，逐個將value值解壓出來；

value值解壓過程包括：確定key中的數據類型；若數據類型表示為定長數據，則根據所述定長數據對應的數據長度從所述壓縮處理數據中解壓出包括長度值和具有所述數據長度的數據信息的value；若數據類型表示為變長數據，則先解析長度值，確定數據長度，再依據所述數據長度確定數據信息，得到包括長度值和數據信息的value。

8.一種基于HBase數據庫的時序數據的處理裝置，包括：

數據獲取模塊，用于獲取時序數據，所述時序數據包括時間信息、數據類型和數據信息；

key值確定模塊，用于將所述時間信息和所述數據類型存儲為具有第一長度的key；

數據編碼模塊，用于對所述數據信息進行編碼操作，得到編碼數據；

長度確定模塊，用于確定所述編碼數據的長度值；

value值確定模塊，用于將所述長度值和所述編碼數據存儲為value；

存儲確定模塊，用于依據所述key和所述value確定所述時序數據的存儲數據。

9.一種存儲介質，其上存儲有程序，該程序被處理器執行時實現如下操作：獲取時序數據，所述時序數據包括時間信息、數據類型和數據信息；將所述時間信息和所述數據類型存儲為具有第一長度的key；對所述數據信息進行編碼操作，得到編碼數據；確定所述編碼數據的長度值；將所述長度值和所述編碼數據存儲為value；依據所述key和所述value確定所述時序數據的存儲數據。

10.一種電子設備，包括：

處理器；以及

存儲器，用于存儲所述處理器的可執行指令；

其中，所述可執行指令包括：獲取時序數據，所述時序數據包括時間信息、數據類型和數據信息；將所述時間信息和所述數據類型存儲為具有第一長度的key；對所述數據信息進行編碼操作，得到編碼數據；確定所述編碼數據的長度值；將所述長度值和所述編碼數據存儲為value；依據所述key和所述value確定所述時序數據的存儲數據。