[發明專利]一種數據查詢的分配方法及裝置

有效

• 申請號: 201710887132.4
• 申請日: 2017-09-26
• 公開（公告）號: CN110069511B
• 公開（公告）日: 2021-10-15
• 發明（設計）人: 黃耀
• 申請（專利權）人: 北京國雙科技有限公司
• 主分類號: G06F16/245
• 分類號: G06F16/245;G06F9/50
• 代理公司: 北京鼎佳達知識產權代理事務所(普通合伙) 11348
• 代理人: 王偉鋒;劉鐵生

本發明公開了一種數據查詢的分配方法及裝置，涉及數據處理技術領域，為解決現有的數據查詢時全部數據均統一處理，使得當存在數據量較大查詢時占用磁盤帶寬而導致數據量較小的查詢仍需等待很長時間，造成的數據查詢的效率較低的問題。本發明的方法包括：接收數據查詢請求；根據所述標識信息，獲取與所述待查詢數據對應的數據量信息；按照所述數據量信息，分配與所述數據查詢請求對應的數據處理集群。本發明適合應用在數據查詢的分配中。

技術領域

本發明涉及數據處理技術領域，尤其涉及一種數據查詢的分配方法及裝置。

背景技術

隨著網絡技術的不斷發展，企業信息系統產生了大量的業務數據，而從這些海量的業務數據中提取出對企業決策分析有用的信息，這成為企業決策管理人員十分重視和關注的方面。為此，以支持決策管理分析為主要目的的OLAP(On-Line AnalyticalProcessing，聯機分析處理)已成為廣泛應用的分析處理方法。用戶可以通過OLAP從多角度對信息進行快速、一致、交互地存取，從而獲得對數據的更深入了解。

通常情況下，在進行OLAP線上分析處理時需要讀取大量的數據來進行查詢和處理，而目前在查詢數據時無論數據量大小，均在相同的處理器中進行查詢和處理，因此當存在數據量很大的查詢時會占據處理器磁盤帶寬，使得數據量較小的查詢需要的時間很長，導致數據查詢效率較低的問題。

發明內容

鑒于上述問題，本發明提供一種數據查詢的分配方法及裝置，主要目的在于將不同數據量的數據查詢分配在不同的數據處理集群中進行查詢。

為解決上述技術問題，第一方面，本發明提供了一種數據查詢的分配方法，該方法包括：

接收數據查詢請求，所述數據查詢請求中攜帶有與待查詢數據對應的標識信息；

根據所述標識信息，獲取與所述待查詢數據對應的數據量信息，所述數據量信息用于標識所述待查詢數據的數據量；

按照所述數據量信息，分配與所述數據查詢請求對應的數據處理集群，所述數據處理集群中包含有一個或多個能夠執行數據查詢操作的處理器。

可選的，所述方法還包括：

創建多個數據處理集群，其中每個數據處理集群分別用于查詢不同數據量范圍的數據；

配置與所述各個數據處理集群分別對應的數據量標識符，所述數據量標識符用于標識所述數據處理集群在執行數據查詢操作時對應的查詢數據量范圍。

可選的，所述按照所述數據量信息，分配與所述數據查詢請求對應的數據處理集群包括：

根據所述待查詢數據對應的數據量信息確定所述待查詢數據對應的數據量范圍；

根據所述待查詢數據對應的數據量范圍和所述各個數據處理集群分別對應的數據量標識符，分配與所述數據查詢請求對應的數據處理集群。

可選的，所述按照所述數據量信息，分配與所述數據查詢請求對應的數據處理集群之后，所述方法還包括：

檢測在所述與所述數據查詢請求對應的數據處理集群中是否存在可用處理器；

若存在，則觸發所述處理器對所述待查詢數據進行查詢；

若不存在，則將所述數據查詢請求添加至等待隊列，所述等待隊列中保存有按照時間順序排列的一個或多個數據查詢請求。

可選的，所述方法還包括：

按照預置時間間隔，對所述處理器對應的數據查詢性能進行檢測；

根據檢測結果對所述數據處理集群進行更新。

第二方面，本發明還提供了一種數據查詢的分配裝置，該裝置包括：