[發明專利]在數據庫中寫入和查詢數據的方法與裝置及其管理系統和計算機可讀存儲介質

有效

• 申請號: 201610374476.0
• 申請日: 2016-05-31
• 公開（公告）號: CN107451142B
• 公開（公告）日: 2022-05-27
• 發明（設計）人: 何剛
• 申請（專利權）人: 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F16/28
• 分類號: G06F16/28
• 代理公司: 中科專利商標代理有限責任公司 11021
• 代理人: 倪斌

提供了一種在數據庫中寫入數據的方法和裝置、查詢數據的方法和裝置、以及數據庫管理系統，其中數據庫包括根據多個維度劃分出的多個維度庫。所述系統包括：維度管理模塊，配置為對多個維度進行管理并存儲每個維度的信息；寫入分發模塊，配置為當向數據庫寫入數據時，獲取多個維度的信息；根據所述信息，確定數據是否含有各維度的關聯數據部分；以及響應于確定數據含有關聯數據部分，至少將關聯數據部分分發到所述至少一個維度的維度庫；查詢解析模塊，配置為根據查詢請求確定查詢維度和查詢條件，并獲取所確定的維度的信息；路由模塊，配置為根據所述信息，路由到對應維度庫；以及執行模塊，配置為根據查詢條件，在所述對應維度庫內執行查詢。

技術領域

本申請涉及信息技術領域，具體地，涉及一種在數據庫中寫入和數據的方法與裝置、一種在數據庫中寫入和數據的方法與裝置以及一種數據庫管理系統。

背景技術

在互聯網應用中，伴隨著業務飛速發展，導致業務數據量猛增，使得單表查詢越來越慢，從而無法滿足使用要求。因此，常見的改進方法是采用各種切分處理，但是現有系統的數據查詢方法往往選擇單個維度以便進行單維度切分。單維度切分需要根據業務特點找出合適的切分維度，使得在用戶查詢的維度中剛好包含切分維度的情況下，可以快速的定位分表，并從分表中查詢出數據。然而，在用戶查詢的維度中不包含切分維度的情況下，無法實現快速定位分表，因此需要把查詢分發到所有的分表中，然后合并所有分表內的查詢結果，這樣使得整個查詢效率就會降低，且無法減輕數據庫負載。此外，如果并發很高的話，不能做到流量分擔，因為每個庫，每個表都需要查詢到。

也就是說，在單維度切分和查詢中，非切分維度只能支持少量的查詢，且無法在多個維度都需要高并發的訪問的情況下使用。此外，由于在用戶查詢的維度中不包括切分維度的情況下需要將查詢分發到各個分表以及合并結果數據，如果結果數據中存在排序分組等，則合并結果數據就變得非常復雜，使得實際項目實施成本高昂。附加地，現有單維度切分和查詢的解決方案不能減輕數據庫負擔，資源利用率低，在非劃分維度查詢的情況下，每個分表都要被查詢，使得每個數據庫資源都需要提供服務。

因此，本公開提出一種在數據庫中寫入數據的方法與裝置、一種在數據庫中查詢數據的方法與裝置、以及一種數據庫管理系統，從而解決海量數據在切分時不能多維度切分且在查詢時不能多維度查詢的問題，使得能夠支持多個維度高并發的查詢。

發明內容

為了至少解決上述問題，本發明提供了一種在數據庫中寫入數據的方法與裝置、一種在數據庫中查詢數據的方法與裝置、以及一種數據庫管理系統，從而解決海量數據在切分時不能多維度切分且在查詢時不能多維度查詢的問題，使得能夠支持多個維度高并發的查詢。

根據本發明的第一方面，提供了一種在數據庫中寫入數據的方法，其中所述數據庫包括根據預先設定的多個維度而劃分的多個維度庫，所述方法可以包括：響應于向所述數據庫寫入數據，獲取所述多個維度的信息；根據所獲取的信息，確定要寫入的數據是否含有與所述多個維度中的各維度有關的關聯數據部分；以及響應于確定所述數據含有與至少一個維度有關的關聯數據部分，至少將所述關聯數據部分分發到所述至少一個維度的維度庫。

優選地，所述至少將所述關聯數據部分分發到所述至少一個維度的維度庫可以包括：將所述數據全部分發到所述至少一個維度的維度庫。

優選地，所述數據庫還可以包括全量數據數據庫，以及所述方法還可以包括：響應于向所述數據庫寫入數據，將所述數據分發到所述全量數據數據庫。

優選地，所述信息可以包括對應維度的入庫管道地址信息以及訂閱字段。

優選地，所述方法還可以包括在經由入庫管道至少將所述關聯數據部分分發到所述各維度中的至少一個維度的維度庫之后，針對所述對應維度的維度庫執行分表處理。