[發明專利]索引創建方法、裝置、存儲服務器以及存儲介質

在審

• 申請號: 202110250241.1
• 申請日: 2021-03-05
• 公開（公告）號: CN112883036A
• 公開（公告）日: 2021-06-01
• 發明（設計）人: 張琴和
• 申請（專利權）人: 鵬城實驗室
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/2453;G06F16/2455;G06F16/27
• 代理公司: 深圳市世紀恒程知識產權代理事務所 44287
• 代理人: 張志江

本發明公開一種索引創建方法，應用于存儲服務器；所述方法包括以下步驟：在接收到待存儲數據時，將所述待存儲數據存儲于所述存儲服務器；在所述待存儲數據滿足預設條件時，在所述存儲服務器的可用索引中確定出與所述待存儲數據對應的選定索引；在所述選定索引對應的選定已存儲數據的數據量達到預設閾值時，基于所述待存儲數據對應的待寫入索引信息和時間信息，創建新的可用索引。本發明還公開了一種索引創建裝置、存儲服務器以及計算機可讀存儲介質。利用本發明的索引創建方法，利用獲得的索引進行數據查詢時，查詢效率較高。

技術領域

本發明涉及數據存儲技術領域，特別涉及一種索引創建方法、裝置、存儲服務器以及計算機可讀存儲介質。

背景技術

在分布式的大數據處理場景中，如果要將大量且持續不斷的數據寫入數據存儲服務器，以便于用戶對數據進行存儲和查詢。

為了保證數據的查詢速度，當索引中的文檔量到達一定量時需要對其進行分索引操作，相關技術中，公布了一種索引創建方法，當存儲的數據量到達一定值時，將該存儲的數據作為一個數據組，生成對應的索引；隨著時間的推移，存儲的數據越來越多，獲得的索引越來越多，每個索引對應的數據量相同；當需要對數據進行查詢時，通過索引，查詢到對應的數據。

但是，采用現有的索引創建方法，利用獲得的索引進行數據查詢時，數據查詢效率較低。

發明內容

本發明的主要目的是提供一種索引創建方法、裝置、存儲服務器以及計算機可讀存儲介質，旨在解決現有技術中采用現有的索引創建方法，利用獲得的索引進行數據查詢時，數據查詢效率較低的技術問題。

為實現上述目的，本發明提出一種索引創建方法，應用于存儲服務器；所述方法包括以下步驟：

在接收到待存儲數據時，將所述待存儲數據存儲于所述存儲服務器；

在所述待存儲數據滿足預設條件時，在所述存儲服務器的可用索引中確定出與所述待存儲數據對應的選定索引；

在所述選定索引對應的選定已存儲數據的數據量達到預設閾值時，基于所述待存儲數據對應的待寫入索引信息和時間信息，創建新的可用索引。

可選的，所述基于所述待存儲數據對應的待寫入索引信息和時間信息，創建新的可用索引的步驟包括：

基于所述待寫入索引信息、所述待存儲數據的當前存儲時間和預設時間，創建所述新的可用索引。

可選的，所述方法還包括：

在所述選定索引對應的選定已存儲數據的數據量未超過預設閾值時，利用所述待寫入索引信息對所述選定索引進行更新，以獲得更新后的選定索引。

可選的，所述選定索引包括所述選定已存儲數據的初始存儲時間和所述預設時間組成的時間區間；所述基于所述待寫入索引信息、所述待存儲數據的當前存儲時間和預設時間，創建所述新的可用索引的步驟之前，所述方法還包括：

利用所述當前存儲時間對所述時間區間中的所述預設時間進行更新，以獲得更新后的選定索引。

可選的，所述待存儲數據具有順序標識；所述基于所述待寫入索引信息、所述待存儲數據的當前存儲時間和預設時間，創建所述新的可用索引的步驟之前，所述方法還包括：

利用預設標識對所述順序標識進行替換，以獲得新的待存儲數據；

所述基于所述待寫入索引信息、所述待存儲數據的當前存儲時間和預設時間，創建所述新的可用索引的步驟包括：

基于所述新的待存儲數據具有的所述預設標識，利用所述待寫入索引信息、所述當前存儲時間和預設時間，創建所述新的可用索引。

可選的，所述待存儲數據為經過spark streaming處理后的RDD數據。