[發明專利]一種大數據存儲方法

在審

• 申請號: 202010822336.1
• 申請日: 2020-08-16
• 公開（公告）號: CN111970361A
• 公開（公告）日: 2020-11-20
• 發明（設計）人: 魏宇銳
• 申請（專利權）人: 深圳市賽宇景觀設計工程有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08
• 代理公司: 北京化育知識產權代理有限公司 11833
• 代理人: 尹均利

1.一種大數據存儲的方法，其特征在于，包括：

云端中心服務器獲取第一云服務器的運行狀態參數，并基于所述運行狀態參數，判斷所述第一云服務器的運行效率；

若所述第一云服務器的運行效率低于預設閾值，則獲取所述第一云服務器中存儲區域的數據類型；

獲取第二云服務器的運行狀態參數，并基于所述運行狀態參數判斷所述第二云服務器的運行效率；

若所述第二云服務器的運行效率高于所述預設閾值，則獲取所述第二云服務器存儲區域的數據類型；

判斷所述第一云服務器和所述第二云服務器存儲區域的數據類型是否為多源異構數據類型，若是，則判斷所述多源異構數據類型中是否存在存儲干擾；

若所述多源異構數據類型存在存儲干擾，則將所述第一云服務器和所述第二云服務器存儲區域的數據進行抗干擾處理，并將所述處理后的第一云服務器存儲區域的部分數據轉移至所述第二云服務器的存儲區域中。

2.根據權利要求1所述的方法，其特征在于，若所述多源異構數據類型存在存儲干擾，則將所述第一云服務器和所述第二云服務器存儲區域的數據進行抗干擾處理，并將所述處理后的第一云服務器存儲區域的部分數據轉移至所述第二云服務器的存儲區域中，包括：

若所述多源異構數據類型存在模式沖突、標識符沖突或數據沖突的其中一種或多種，則確定所述多源異構數據類型存在存儲干擾；

基于所述第二云服務器存儲的數據類型，獲取所述第一云服務器中與所述第二云服務器存儲數據類型一致的數據，定義為待轉移數據；

將所述待轉移數據從第一云服務器轉移到所述第二云服務器。

3.根據權利要求1所述的方法，其特征在于，若所述多源異構數據類型存在存儲干擾，則將所述第一云服務器和所述第二云服務器存儲區域的數據進行抗干擾處理，并將所述處理后的第一云服務器存儲區域的部分數據轉移至所述第二云服務器的存儲區域中，包括：

若所述多源異構數據類型存在模式沖突、標識符沖突或數據沖突的其中一種或多種，則確定所述多源異構數據類型存在存儲干擾；

將所述第二云服務器分為若干個存儲區域，每一個存儲區域內部的數據類型相同且互不干擾，相鄰存儲區域的數據類型不相同且互不干擾；

提取所述第一云服務器存儲區域中的部分數據，并按照數據類型的不同，分別放置在所述若干個存儲區域的空白存儲空間內，其中，放置的數據的數據類型與對應存儲區域的數據類型一致。

4.根據權利要求1所述的方法，其特征在于，若所述多源異構數據類型存在存儲干擾，則將所述第一云服務器和所述第二云服務器存儲區域的數據進行抗干擾處理，并將所述處理后的第一云服務器存儲區域的部分數據轉移至所述第二云服務器的存儲區域中，包括：

若所述多源異構數據類型存在模式沖突、標識符沖突或數據沖突的其中一種或多種，則確定所述多源異構數據類型存在存儲干擾；

將所述多源異構數據類型的數據進行歸一化處理，并將所述歸一化處理后的、第一云服務器存儲區域的部分數據轉移至所述第二云服務器的存儲區域中。

5.根據權利要求4所述的方法，其特征在于，將所述多源異構數據類型的數據進行歸一化處理，包括：

設置標準化數據存儲格式，所述標準化數據存儲格式包括預定長度的報頭、數據凈負荷和報尾，所述報頭包括數據類型、ID、數據變化標識符以及數據變化量，所述報尾包括結束符，其中，所述數據變化標識符用于指定所述數據的變化方式，所述數據變化量用于指示所述數據的變化數值；

將不同類型的數據按照所述標準化數據存儲格式進行數據變化，

若所述數據大小超過所述標準化數據存儲格式的凈負荷大小，則將所述數據拆分為多個部分，并設置對應的多個標準化數據存儲格式，將每一拆分部分的數據填入所述標準化數據格式的凈負荷區域中，若未填滿所述凈負荷區域，則剩余部分用0填充，并設置所述數據變化標識符為拆分類型，所述數據變化量為拆分后的數據大小；

若所述數據大小不超過所述標準化數據存儲格式的凈負荷大小，則將所述數據填充至所述所述標準化數據存儲格式的凈負荷區域中，若未填滿所述凈負荷區域，則剩余部分用0填充。