[發明專利]一種數據運算方法及裝置

有效

• 申請號: 201410140151.7
• 申請日: 2014-04-09
• 公開（公告）號: CN104978344B
• 公開（公告）日: 2018-11-20
• 發明（設計）人: 業韜;陳系華;張亮
• 申請（專利權）人: 華為技術有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 郝傳鑫;熊永強

1.一種數據運算方法，其特征在于，所述數據運算方法應用于分布式數據庫，其中，所述分布式數據庫包括多個服務器，所述方法包括：

根據所統計的預設分布鍵的各個數據鍵值對應的數據量以及路由信息中所述各個數據鍵值與服務器的對應關系，確定各個服務器對應的數據量；

根據目標服務器對應的數據量，判斷該目標服務器是否存在數據偏斜；

若所述目標服務器存在數據偏斜，則將所述目標服務器對應的數據復制到無數據偏斜的冗余服務器，并修改所述路由信息，使所述目標服務器對應的數據鍵值與所述目標服務器及冗余服務器建立對應關系，其中，所述目標服務器對應至少一個數據鍵值；

當接收到針對目標數據鍵值的數據運算信息，并根據修改后的路由信息確定該目標數據鍵值所在服務器為目標服務器以及對應的冗余服務器時，為所述目標服務器以及對應的冗余服務器分配待處理數據，以使所述目標服務器以及對應的冗余服務器根據所述數據運算信息分別對不同的數據進行運算。

2.如權利要求1所述的方法，其特征在于，所述根據目標服務器對應的數據量，判斷該目標服務器是否存在數據偏斜包括：

將目標服務器對應的數據量與其他服務器對應的數據量進行比較；

若目標服務器對應的數據量與任意一個服務器的數據量的差值達到預設閾值，則判斷所述目標服務器存在數據偏斜。

3.如權利要求1所述的方法，其特征在于，若判斷所述目標服務器存在數據偏斜，還包括：

在所述各個服務器中獲取當前數據量最小的服務器作為所述目標服務器對應的冗余服務器。

4.如權利要求2所述的方法，其特征在于，若判斷所述目標服務器存在數據偏斜，還包括：

在所述各個服務器中獲取當前數據量最小的服務器作為所述目標服務器對應的冗余服務器。

5.如權利要求1-4任一項所述的方法，其特征在于，所述根據所統計的預設分布鍵的各個數據鍵值對應的數據量以及路由信息中所述各個數據鍵值與服務器的對應關系之前，還包括：

設置所述路由信息中各個數據鍵值與服務器的對應關系。

6.如權利要求5所述的方法，其特征在于，所述設置所述路由信息中各個數據鍵值與服務器的對應關系包括：

根據預設路由算法對所述各個數據鍵值進行運算，從而獲得所述各個數據鍵值對應的運算值；

對所述各個運算值取模，并將取模結果與服務器的編碼信息進行匹配，從而確定所述各個數據鍵值與服務器的對應關系。

7.如權利要求1-4任一項所述的方法，其特征在于，所述修改所述路由信息，使所述目標服務器對應的數據鍵值與所述目標服務器及冗余服務器建立對應關系之后，還包括：

接收外部系統針對所述目標數據鍵值加載的數據；

根據修改后的路由信息，確定所述目標數據鍵值所在服務器為目標服務器以及對應的冗余服務器；

向所述目標服務器以及對應的冗余服務器加載該數據。

8.如權利要求5所述的方法，其特征在于，所述修改所述路由信息，使所述目標服務器對應的數據鍵值與所述目標服務器及冗余服務器建立對應關系之后，還包括：

接收外部系統針對所述目標數據鍵值加載的數據；

根據修改后的路由信息，確定所述目標數據鍵值所在服務器為目標服務器以及對應的冗余服務器；

向所述目標服務器以及對應的冗余服務器加載該數據。

9.如權利要求6所述的方法，其特征在于，所述修改所述路由信息，使所述目標服務器對應的數據鍵值與所述目標服務器及冗余服務器建立對應關系之后，還包括：

接收外部系統針對所述目標數據鍵值加載的數據；

根據修改后的路由信息，確定所述目標數據鍵值所在服務器為目標服務器以及對應的冗余服務器；

向所述目標服務器以及對應的冗余服務器加載該數據。