[發明專利]高并發數據查詢方法、裝置、系統、設備及可讀存儲介質

在審

• 申請號: 201910389924.8
• 申請日: 2019-05-10
• 公開（公告）號: CN110209693A
• 公開（公告）日: 2019-09-06
• 發明（設計）人: 楊兆輝;汪金忠;徐根林;孫遷
• 申請（專利權）人: 蘇寧云計算有限公司
• 主分類號: G06F16/2453
• 分類號: G06F16/2453;G06F9/50
• 代理公司: 北京市萬慧達律師事務所 11111
• 代理人: 趙然

1.一種高并發數據查詢方法，其特征在于，所述方法包括：

根據數據分片的查詢歷史數據獲取查詢并發數；

根據所述查詢并發數計算得到寫入副本數；

根據所述寫入副本數，按照寫入負載指數由低到高分別寫入到對應節點；

根據數據分片的查詢請求，按照查詢負載指數由低到高到相應節點獲取查詢結果。

2.根據權利要求1所述的方法，其特征在于，根據所述查詢并發數計算得到寫入副本數，包括：

根據所述查詢并發數以及每個副本支持并發數計算得到寫入副本數。

3.根據權利要求1所述的方法，其特征在于，根據所述寫入副本數，按照寫入負載指數由低到高分別寫入到對應節點，包括：

根據每個節點當前的IO利用率、CPU利用率以及第一預設權重規則計算得到所有節點的寫入負載指數。

4.根據權利要求1所述的方法，其特征在于，根據數據分片的查詢請求，按照查詢負載指數由低到高到相應節點獲取查詢結果，包括：

根據每個節點當前的IO利用率、CPU利用率、網絡負荷利用率以及第二預設權重規則計算得到所有節點的查詢負載指數。

5.根據權利要求1至4任一項所述的方法，其特征在于，所述方法還包括：

根據所述數據分片的查詢歷史數據，利用ARIMA時間序列模型預測未來需要增加的增加副本數，根據所述增加副本數進行副本動態調整。

6.一種高并發數據查詢裝置，其特征在于，所述裝置包括：

查詢并發數獲取模塊，用于根據數據分片的查詢歷史數據獲取查詢并發數；

寫入副本數計算模塊，用于根據所述查詢并發數計算得到寫入副本數；

副本寫入模塊，用于根據所述寫入副本數，按照寫入負載指數由低到高分別寫入到對應節點；

查詢結果獲取模塊，用于根據數據分片的查詢請求，按照查詢負載指數由低到高到相應節點獲取查詢結果。

7.根據權利要求6所述的裝置，其特征在于，所述寫入副本數計算模塊用于：

根據所述查詢并發數以及每個副本支持并發數計算得到寫入副本數。

8.根據權利要求6所述的裝置，其特征在于，所述副本寫入模塊包括第一計算子模塊，所述第一計算子模塊用于：

根據每個節點當前的IO利用率、CPU利用率以及第一預設權重規則計算得到所有節點的寫入負載指數。

9.根據權利要求6所述的裝置，其特征在于，所述查詢結果獲取模塊包括第二計算子模塊，所述第二計算子模塊用于：

根據每個節點當前的IO利用率、CPU利用率、網絡負荷利用率以及第二預設權重規則計算得到所有節點的查詢負載指數。

10.根據權利要求6至9任一項所述的裝置，其特征在于，所述裝置還包括副本動態調整模塊，用于：

根據所述數據分片的查詢歷史數據，利用ARIMA時間序列模型預測未來需要增加的增加副本數，根據所述增加副本數進行副本動態調整。

11.一種高并發數據查詢系統，其特征在于，所述系統包括數據副本管理器、數據加載器、查詢負載均衡器以及多個節點，其中，

所述數據副本管理器用于：根據數據分片的查詢歷史數據獲取查詢并發數，并根據所述查詢并發數計算得到寫入副本數；

所述數據加載器，用于根據所述寫入副本數，按照寫入負載指數由低到高分別寫入到對應節點；

所述查詢負載均衡器，用于根據數據分片的查詢請求，按照查詢負載指數由低到高到相應節點獲取查詢結果。

12.根據權利要求11所述的系統，其特征在于，所述數據副本管理器還用于：根據所述數據分片的查詢歷史數據，利用ARIMA時間序列模型預測未來需要增加的增加副本數，根據所述增加副本數進行副本動態調整。