[發明專利]一種數據分配方法、裝置及設備

有效

• 申請號: 201710816443.1
• 申請日: 2017-09-12
• 公開（公告）號: CN110019187B
• 公開（公告）日: 2023-05-12
• 發明（設計）人: 雷尚順
• 申請（專利權）人: 阿里云計算有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/27
• 代理公司: 廣州鑄智知識產權代理有限公司 44886
• 代理人: 徐瑞紅

1.一種數據分配方法，其特征在于，已確定待分區數據所需的實際分區，所述方法包括：

根據設定的模擬分區數量，劃分待分區數據，以得到多個模擬分區數據集，其中，所述模擬分區數據集的數量大于實際分區數量；

在所述多個模擬分區數據集中，獲取數據量滿足設定條件的各模擬分區數據集，其中，所述數據量滿足設定條件的各模擬分區數據集數量等于實際分區數量；

根據所述數據量滿足設定條件的各模擬分區數據集的數據劃分結果，將所述待分區數據劃分至實際分區中；所述設定條件包括各模擬分區數據集中的數據量的差值不超過預設范圍；

其中，所述根據設定的模擬分區數量，劃分待分區數據，包括：

根據所述模擬分區數量及待分區數據的屬性，將具有相同屬性值的待分區數據劃分至相同的模擬分區數據集。

2.如權利要求1所述的數據分配方法，其特征在于，根據所述模擬分區數量及待分區數據的屬性，將具有相同屬性值的待分區數據劃分至相同的模擬分區數據集，包括：

選取待分區數據所包含的屬性；

針對所述屬性對應的屬性值，確定所述屬性值唯一對應的表征值；

根據所述表征值和所述模擬分區數量，確定所述表征值所對應的模擬分區數據集；

其中，所述表征值至少包括哈希值、隨機數值或摘要值。

3.如權利要求2所述的數據分配方法，其特征在于，根據所述表征值和所述模擬分區數量，確定所述表征值所對應的模擬分區數據集，包括：

對所述模擬分區數據集編號；

根據所述表征值及所述模擬分區數量，進行取模運算；

將取模運算的結果確定為所述表征值對應的模擬分區數據集編號。

4.如權利要求1所述的數據分配方法，其特征在于，根據所述數據量滿足設定條件的各模擬分區數據集的數據劃分結果，將所述待分區數據劃分至實際分區中，包括：

建立所述滿足設定條件的各模擬分區數據集和所述實際分區間的對應關系；

根據所述對應關系，將所述滿足設定條件的各模擬分區數據集中的數據，劃分至各自對應的實際分區。

5.如權利要求4所述的數據分配方法，其特征在于，建立所述滿足設定條件的各模擬分區數據集和所述實際分區間的對應關系，包括：

對各模擬分區數據集和各實際分區按順序編號；

當多個數據量滿足設定條件的模擬分區數據集編號連續時，確定所述數據量滿足設定條件的模擬分區數據集編號的偏移量；

根據所述偏移量，將所述數據量滿足設定條件的模擬分區數據集編號偏移至與實際分區編號相同；

建立具有相同編號的實際分區和所述數據量滿足設定條件的模擬分區的一一對應關系。

6.如權利要求4所述的數據分配方法，其特征在于，在根據所述對應關系，將所述滿足設定條件的各模擬分區數據集中的數據，劃分至各自對應的實際分區之后，還包括：

根據實際分區的數量和所述待分區數據的屬性，將數據量不滿足設定條件的各模擬分區數據集的數據劃分至實際分區，以使得具有相同屬性值的待分區數據劃分至同一個實際分區。

7.如權利要求6所述的數據分配方法，其特征在于，根據實際分區的數量和所述待分區數據的屬性，將數據量不滿足設定條件的各模擬分區數據集的數據劃分至實際分區，包括：

選取所述數據量不滿足設定條件的各模擬分區數據集的數據所包含的屬性；

針對所述屬性對應的屬性值，確定所述屬性值唯一對應的表征值；

根據所述表征值和所述實際分區數量，確定所述表征值所對應的實際分區數據集；

將所述數據量不滿足設定條件的各模擬分區數據集的數據劃分至所述表征值所對應實際分區；

其中，所述表征值至少包括哈希值、隨機數值或摘要值。

8.如權利要求4所述的數據分配方法，其特征在于，在根據所述對應關系，將所述滿足設定條件的各模擬分區數據集中的數據，劃分至各自對應的實際分區之后，還包括：

根據實際分區的數量，將數據量不滿足設定條件的各模擬分區數據集的數據均勻劃分至實際分區。