[發明專利]一種數據分配方法、裝置及設備

有效

• 申請號: 201710816443.1
• 申請日: 2017-09-12
• 公開（公告）號: CN110019187B
• 公開（公告）日: 2023-05-12
• 發明（設計）人: 雷尚順
• 申請（專利權）人: 阿里云計算有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/27
• 代理公司: 廣州鑄智知識產權代理有限公司 44886
• 代理人: 徐瑞紅

本申請實施例公開了一種數據分配方法、裝置及設備，所述方法包括:根據設定的模擬分區數量，劃分待分區數據，以得到多個模擬分區數據集，其中，所述模擬分區數據集的數量大于實際分區數量；在所述多個模擬分區數據集中，獲取數據量滿足設定條件的各模擬分區數據集，其中，所述數據量滿足條件的各模擬分區數據集數量等于實際分區數量；根據所述數據量滿足條件的各模擬分區數據集的數據劃分結果，將所述待分區數據劃分至實際分區中。本方法實現將待分區數據均分劃分至實際分區中，避免了因某個實際分區中的數據量太多而增大整體數據查詢或者其他操作時的耗時，提升了整體的響應速度和操作效率。

技術領域

本申請涉及計算機技術領域，尤其涉及一種數據分配方法、裝置及設備。

背景技術

大數據處理中通常采用分布式的數據庫，對數據進行分區是常見的基本需求。即，分布式的數據庫在存儲數據的時候，會將數據分散存儲到多個分區上，例如將數據分散存儲到多個數據庫、數據表或者數據文件等。

現有技術中，出于實際業務的需要，通常是基于數據的屬性進行數據分配，也即，將具有相同屬性的數據分配到同一個分區上，從而根據該屬性進行數據查詢時，在該分區查詢即可，不必跨區查詢。

不過，該方法也有不足之處，分配數據有可能不均勻，導致各分區分配到的數據量存在較大差異，某些分區得到的數據量顯著多余其他分區，進而導致在數據量較多的分區中進行數據查詢的耗時，高于其他分區，影響數據查詢時的響應速度和操作效率。

發明內容

本申請實施例提供一種數據分配方法、裝置及設備，用于解決當前技術中存在的數據分區不均勻的問題。

本申請實施例提供一種數據分配方法，已確定待分區數據所需的實際分區，包括：

根據設定的模擬分區數量，劃分待分區數據，以得到多個模擬分區數據集，其中，所述模擬分區數據集的數量大于實際分區數量；

在所述多個模擬分區數據集中，獲取數據量滿足設定條件的各模擬分區數據集，其中，所述數據量滿足條件的各模擬分區數據集數量等于實際分區數量；

根據所述數據量滿足條件的各模擬分區數據集的數據劃分結果，將所述待分區數據劃分至實際分區中。

基于同樣的思路，本申請實施例提供一種數據分配裝置，包括：

第一劃分模塊，用于根據設定的模擬分區數量，劃分待分區數據，以得到多個模擬分區數據集，其中，所述模擬分區數據集的數量大于實際分區數量；

獲取模塊，用于在所述多個模擬分區數據集中，獲取數據量滿足設定條件的各模擬分區數據集，其中，所述數據量滿足條件的各模擬分區數據集數量等于實際分區數量；

第二劃分模塊，用于根據所述數據量滿足條件的各模擬分區數據集的數據劃分結果，將所述待分區數據劃分至實際分區中。

對應的，本申請實施例還提供一種數據分配的設備，所述設備包括：

存儲器，存儲數據劃分程序；

處理器，接收到待分區數據后，調用存儲器中的數據劃分程序，并執行：

根據設定的模擬分區數量，劃分待分區數據，以得到多個模擬分區數據集，其中，所述模擬分區數據集的數量大于實際分區數量；

在所述多個模擬分區數據集中，獲取數據量滿足設定條件的各模擬分區數據集，其中，所述數據量滿足條件的各模擬分區數據集數量等于實際分區數量；

根據所述數據量滿足條件的各模擬分區數據集的數據劃分結果，將所述待分區數據劃分至實際分區中。

本申請實施例還提供了一種非易失性計算機存儲介質，存儲有計算機可執行指令，所述計算機可執行指令設置為：