[發明專利]一種關系型數據庫數據存儲查詢方法

有效

• 申請號: 202011495009.6
• 申請日: 2020-12-17
• 公開（公告）號: CN112463837B
• 公開（公告）日: 2022-08-16
• 發明（設計）人: 王英
• 申請（專利權）人: 四川長虹電器股份有限公司
• 主分類號: G06F16/2455
• 分類號: G06F16/2455;G06F16/28
• 代理公司: 四川省成都市天策商標專利事務所(有限合伙) 51213
• 代理人: 趙以鵬

本發明公開了一種關系型數據庫數據存儲查詢方法，涉及數據處理技術領域。所述方法包括存儲步驟和查詢步驟，將關系數據表中需要經常檢索的字段數據保存到hbase上,將關系表數據的主鍵作為hbase的key來保存，同時在查詢過程中在redis里緩存條件查詢數據；檢索過程中通過檢索hbase表中的數據，得到key，即關系表中的主鍵，再通過主鍵去獲取關系表中的數據，從而達到提高數據實時檢索速度與系統性能的效果。

技術領域

本發明涉及數據處理技術領域，更具體的說是涉及一種關系型數據庫數據存儲查詢方法。

背景技術

目前的關系數據表的實時數據查詢中，為提高數據檢索速度，傳統解決方法一般是在關系型數據表中建立索引或者聯合索引進行數據查詢，從而保證了提供大部分的實時查詢應用。

雖然理論上通過創建索引可以加快數據的檢索速度，提高系統的查詢性能，但是索引字段的類型也會也影響查詢性能，int性能最好，字符類型的索引查詢性能略差，并且隨著表存儲量增加，當存儲超過百萬級別的數據量時，查詢效率明顯降低。此外創建索引和維護索引不僅需要占用物理空間和邏輯空間，而且動態維護索引的過程需要耗費時間，而這個時間是隨著數據量的增加而增加的。因此在海量數據表中通過創建索引的方式反而會降低數據的檢索速度與系統性能。

發明內容

本發明的目的在于提供一種關系型數據庫數據存儲查詢方法，以期解決背景技術中的問題。該專利針對的是在關系數據表海量數據中，數據實時檢索速度低，查詢性能差的問題。造成該問題的技術實質是關系型數據表是行式存儲，行式存儲在獲取一行數據時會很高效，但是系統需要根據某列進行數據檢索時，那么行式存儲會取出一行行的數據，再根據檢索字段與所取出的數據進行逐行比較，該比較過程不僅會導致大量的內存占用，而且所耗費的時間隨著數據量的增加而逐漸增加，從而降低檢索速度與系統的查詢性能。

為了實現上述目的，本發明采用以下技術方案：

一種關系型數據庫數據存儲查詢方法，所述方法包括存儲步驟和查詢步驟如下：

存儲步驟：

步驟1：在關系型數據表中新增數據并返回主鍵ID。

步驟2：將需要查詢的字段的相關數據保存到hbase上，將數據的主鍵ID作為hbase的key來保存。

步驟3：清空redis緩存的查詢模塊數據。

步驟4：若編輯關系型數據表中的數據，則獲取主鍵ID后，依次執行步驟5、步驟2、步驟3、步驟6。

步驟5：在hbase庫根據key(主鍵ID)刪除對應的數據。

步驟6：在redis的數據緩存模塊，根據主鍵ID，刪除對應的緩存數據。

查詢步驟：

步驟7：獲取查詢字段數據，將查詢字段作為key，在redis的緩存查詢模塊獲取對應的value值。若未獲取到相關的查詢條件數據，則執行步驟8。否則執行步驟9。

步驟8：根據查詢字段數據，查詢hbase數據表，返回查詢所得的key，即主鍵ID集合；并將查詢字段作為key，hbase的key(主鍵ID集合)作為value來保存在redis的set結構中。

步驟9：根據獲取到的hbase對應的key(主鍵ID集合)，再在redis的數據緩存模塊中根據主鍵ID獲取相關數據。若獲取到數據，則本次數據查詢結束；若未獲取到相關數據，則執行步驟10。

步驟10：根據主鍵ID查詢關系型表中數據，然后將主鍵ID作為key，對應數據作為value存儲在redis的數據緩存模塊，設置緩存時長為T。