[發明專利]一種分布式存儲系統

有效

• 申請號: 201611227452.9
• 申請日: 2016-12-27
• 公開（公告）號: CN106713465B
• 公開（公告）日: 2020-11-17
• 發明（設計）人: 萬志宏;陳海峰;王建德;朱林;史巖
• 申請（專利權）人: 北京銳安科技有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08;G06F3/06
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 胡彬;鄧猛烈

1.一種分布式存儲系統，其特征在于，包括：至少一個數據服務器、至少一個存儲服務器以及中心交換機，所述至少一個數據服務器，通過所述中心交換機與所述至少一個存儲服務器相連；

所述至少一個數據服務器分布式地存儲從第三方獲取的海量數據以及對所述海量數據并行進行過濾處理，得到目標數據，將所述目標數據通過中心交換機發送至所述至少一個存儲服務器；所述至少一個存儲服務器接收并存儲所述目標數據；

其中，所述至少一個數據服務器根據所述至少一個存儲服務器的歷史選取信息，從至少一個存儲服務器的位置信息中確定選取次數最少的位置信息，將所述目標數據通過所述中心交換機發送給選取次數最少的位置信息所對應的存儲服務器。

2.根據權利要求1所述的分布式存儲系統，其特征在于，所述至少一個數據服務器包括數據處理器和監控器，所述數據處理器與所述監控器相連；

所述數據處理器對獲取的海量數據進行過濾處理得到目標數據；所述監控器對所述數據處理器的處理狀態進行監控，并在處理狀態為數據處理異常時進行預警處理。

3.根據權利要求2所述的分布式存儲系統，其特征在于，所述數據處理器包括：

待處理確定模塊，用于在滿足設定的處理條件時，確定所在數據服務器中待處理的海量數據；

數據處理模塊，與所述待處理確定模塊和監控器相連，用于根據設定的處理規則處理所述海量數據，獲得所述海量數據的目標數據。

4.根據權利要求3所述的分布式存儲系統，其特征在于，所述數據處理器，還包括：

處理標記模塊，與所述數據處理模塊相連，用于在獲得所述海量數據的目標數據后，將所述海量數據對應處理標記位的標記值確定為設定標記值，以標記所述海量數據為已處理數據。

5.根據權利要求4所述的分布式存儲系統，其特征在于，所述待處理確定模塊具體用于在滿足設定的處理條件時，確定所在數據服務器中每條海量數據對應處理標記位的標記值；如果存在處理標記位的標記值不為所述設定標記值，則將所述處理標記位對應的海量數據確定為待處理的海量數據。

6.根據權利要求2所述的分布式存儲系統，其特征在于，所述至少一個數據服務器還包括第一存儲器、第一控制器和第一收發器，所述數據處理器與所述第一控制器以及第一存儲器相連，所述第一控制器和第一存儲器分別與所述第一收發器相連，所述第一收發器與所述中心交換機相連；

所述第一存儲器存儲獲取的海量數據以及接收并存儲所述第一收發器通過所述中心交換機接收的所述至少一個存儲服務器的位置信息；所述數據處理器對第一存儲器中的海量數據過濾處理得到目標數據；所述第一控制器接收所述目標數據，并將對應的存儲服務器的位置信息攜帶在所述目標數據后形成第一交互信息，通過所述第一收發器發送給所述中心交換機。

7.根據權利要求6所述的分布式存儲系統，其特征在于，所述至少一個存儲服務器包括第二收發器、第二控制器和第二存儲器，所述第二收發器與所述中心交換機相連，所述第二控制器和所述第二存儲器分別與所述第二收發器相連；

所述第二控制器通過所述第二收發器向所述中心交換機發送所在存儲服務器的位置信息；和/或，所述第二控制器接收所述第二收發器通過所述中心交換機接收的第一交互信息，并在確定所述第一交互信息中包含所在存儲服務器的位置信息后，將所述第一交互信息中的目標數據發送給所述第二存儲器進行存儲。

8.根據權利要求2所述的分布式存儲系統，其特征在于，所述至少一個數據服務器還包括第三存儲器、第三控制器和第三收發器，所述數據處理器與所述第三控制器以及第三存儲器相連，所述第三控制器和第三存儲器分別與所述第三收發器相連，所述第三收發器與所述中心交換機相連；

所述第三存儲器存取獲取的海量數據以及接收并存儲所述第三收發器通過所述中心交換機接收的所述至少一個存儲服務器的位置信息和剩余容量信息；所述數據處理器對第三存儲器中的海量數據過濾處理得到目標數據；所述第三控制器接收所述目標數據，并將剩余容量符合存儲條件的存儲服務器的位置信息攜帶在所述目標數據后形成第二交互信息，通過所述第三收發器發送給所述中心交換機。

9.根據權利要求8所述的分布式存儲系統，其特征在于，所述至少一個存儲服務器還包括第四收發器、第四控制器和第四存儲器，所述第四收發器與所述中心交換機相連，所述第四控制器和所述第四存儲器分別與所述第四收發器相連；

所述第四控制器獲取所述第四存儲器的剩余容量信息和所在存儲服務器的位置信息，通過所述第四收發器發送至所述中心交換機；和/或，

所述第四控制器接收所述第四收發器通過所述中心交換機接收的第二交互信息，并在確定所述第二交互信息中包含所在存儲服務器的位置信息后，將所述第二交互信息中的目標數據發送給所述第四存儲器進行存儲。