[發明專利]數據存儲、檢索方法、系統及存儲介質

在審

• 申請號: 201811366138.8
• 申請日: 2018-11-16
• 公開（公告）號: CN109522310A
• 公開（公告）日: 2019-03-26
• 發明（設計）人: 張志遠;火一莽;萬志宏;石志中;張俊杰
• 申請（專利權）人: 北京銳安科技有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/21;G06F16/25
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

1.一種數據存儲方法，其特征在于，應用于數據存儲系統，所述數據存儲系統包括數據分發分片管理器和服務器，所述服務器包括至少兩個數據管理系統，每個數據管理系統包括數據存儲區域，所述方法包括：

所述數據分發分片管理器獲取待存儲數據及所述待存儲數據的標識信息；

所述數據分發分片管理器基于所述標識信息將所述待存儲數據分發至所述至少兩個數據管理系統中；

所述至少兩個數據管理系統中，每個數據管理系統將分發到自身數據管理系統的子數據存儲至所述數據管理系統中的數據存儲區域。

2.根據權利要求1所述的方法，其特征在于，獲取待存儲數據及所述待存儲數據的標識信息，包括：

獲取待存儲數據及所述待存儲數據的數據信息；

根據所述數據信息生成與所述待存儲數據唯一對應的主鍵；

將所述主鍵作為所述待存儲數據的標識信息。

3.根據權利要求1所述的方法，其特征在于，獲取待存儲數據包括：

讀取原始數據；

按照預設規則對所述原始數據進行過濾處理，將過濾處理后的原始數據作為待存儲數據。

4.根據權利要求1所述的方法，其特征在于，每個數據管理系統還包括數據內存區域；

每個數據管理系統將分發到自身數據管理系統的子數據存儲至所述數據管理系統中的數據存儲區域，包括：

每個數據管理系統將分發到自身數據管理系統的子數據存儲至所述數據管理系統中的數據內存區域；

當所述數據內存區域的當前可用空間小于預設閾值時，將所述子數據轉存至所述數據管理系統中的數據存儲區域。

5.一種數據檢索方法，其特征在于，應用于數據檢索系統，所述數據檢索系統包括數據匯聚管理器和服務器，所述服務器包括至少兩個數據管理系統，所述方法包括：

當所述數據匯聚管理器接收到客戶端發送的數據檢索請求時，將所述數據檢索請求發送所述至少兩個數據管理系統；

所述至少兩個數據管理系統中，每個數據管理系統基于所述數據檢索請求進行數據檢索，確定目標數據，并將所述目標數據發送至所述數據匯聚管理器；

所述數據匯聚管理器接收所述至少兩個數據管理系統中每個數據管理系統發送的目標數據，并將各個目標數據發送至所述客戶端。

6.根據權利要求5所述的方法，其特征在于，將各個目標數據發送至所述客戶端，包括：

按照預設規則對各個目標數據進行分組或排序；

將分組或排序后的目標數據發送至所述客戶端。

7.一種數據存儲系統，其特征在于，包括：數據分發分片管理器和服務器，所述服務器包括核心運算器區域、內存區域、存儲區域及至少兩個數據管理系統；

其中，所述數據管理系統的數量與所述核心運算器區域中包含的核心運算器的數據相同，每個數據管理系統對應占用一個核心運算器；

所述至少兩個數據管理系統中，每個數據管理系統共用所述內存區域和所述存儲區域；

所述數據分發分片管理器，用于將待存儲數據分發至所述至少兩個數據管理系統中；

所述至少兩個數據管理系統中，每個數據管理系統將分發到自身數據管理系統的子數據存儲至與所述數據管理系統對應的存儲區域中；

每個核心預算器對占用所述核心運算器的數據管理系統中的數據進行管理。