[發明專利]數據倉庫信息處理方法、裝置、系統、介質有效
| 申請號: | 201811111998.7 | 申請日: | 2018-09-21 |
| 公開(公告)號: | CN109388637B | 公開(公告)日: | 2020-09-01 |
| 發明(設計)人: | 范葉亮;盧周;錢勇 | 申請(專利權)人: | 京東數字科技控股有限公司 |
| 主分類號: | G06F16/22 | 分類號: | G06F16/22;G06F16/2455;G06F16/28 |
| 代理公司: | 中科專利商標代理有限責任公司 11021 | 代理人: | 劉麗麗 |
| 地址: | 100176 北京市大興區北京經*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據倉庫 信息處理 方法 裝置 系統 介質 | ||
1.一種數據倉庫信息處理方法,所述數據倉庫中包括多個關聯存儲的歷史表格,所述方法包括:
獲取至少一個歷史查詢語句,所述歷史查詢語句用于查詢所述關聯存儲的歷史表格中的多個歷史表格的相關數據;
確定所述至少一個歷史查詢語句對應的多個歷史表格;
基于所述多個歷史表格中的特定歷史表格生成目標表格,所述目標表格包括所述特定歷史表格中的相關數據,所述目標表格作為所述數據倉庫的寬表,其中,針對所述多個歷史表格,將所述歷史查詢語句涉及次數大于第二預設閾值的歷史表格作為所述特定歷史表格;
獲取所述目標表格與所述數據倉庫中的其他歷史表格的相似度,當所述目標表格與數據倉庫中的其他歷史表格的相似度小于第三預設閾值的情況下,存儲所述目標表格。
2.根據權利要求1所述的方法,其中,所述獲取至少一個歷史查詢語句,包括:
獲取通過所述歷史查詢語句查詢所述關聯存儲的歷史表格中的多個歷史表格的相關數據時所涉及的所述數據倉庫的歷史運行數據;
基于所述運行數據中確定所述至少一個歷史查詢語句。
3.根據權利要求1所述的方法,其中,所述確定所述至少一個歷史查詢語句對應的多個歷史表格,包括:
對所述至少一個歷史查詢語句進行解析,得到所述至少一個歷史查詢語句的關聯信息,所述關聯信息包括關聯字段以及關聯條件;
基于所述關聯信息確定所述至少一個歷史查詢語句對應的所述多個歷史表格。
4.根據權利要求1所述的方法,還包括:
從多個初始歷史查詢語句中獲取滿足第一預設條件的查詢語句作為所述至少一個歷史查詢語句。
5.根據權利要求4所述的方法,其中,所述從多個初始歷史查詢語句中獲取滿足第一預設條件的查詢語句作為所述至少一個歷史查詢語句,包括:
對所述多個初始歷史查詢語句進行聚類得到至少一個查詢語句組,其中,每個查詢語句組中的歷史查詢語句之間的相似度滿足第一預設閾值;
從所述至少一個查詢語句組中確定滿足所述第一預設條件的查詢語句組作為目標查詢語句組,所述目標查詢語句組包括所述至少一個歷史查詢語句。
6.根據權利要求5所述的方法,其中,所述對所述多個初始歷史查詢語句進行聚類得到至少一個查詢語句組,包括:
對所述多個初始歷史查詢語句進行處理,得到所述多個初始歷史查詢語句對應的向量;
將多個初始歷史查詢語句對應的向量進行聚類得到所述至少一個查詢語句組,所述至少一個查詢語句組包括相應查詢語句對應的向量。
7.一種數據倉庫信息處理裝置,所述數據倉庫中包括多個關聯存儲的歷史表格,所述裝置包括:
第一獲取模塊,獲取至少一個歷史查詢語句,所述歷史查詢語句用于查詢所述關聯存儲的歷史表格中的多個歷史表格的相關數據;
確定模塊,確定所述至少一個歷史查詢語句對應的多個歷史表格;
生成模塊,基于所述多個歷史表格中的特定歷史表格生成目標表格,所述目標表格包括所述特定歷史表格中的相關數據,所述目標表格作為所述數據倉庫的寬表,其中,針對所述多個歷史表格,將所述歷史查詢語句涉及次數大于第二預設閾值的歷史表格作為所述特定歷史表格;
存儲模塊,獲取所述目標表格與所述數據倉庫中的其他歷史表格的相似度,當所述目標表格與數據倉庫中的其他歷史表格的相似度小于第三預設閾值的情況下,存儲所述目標表格。
8.根據權利要求7所述的裝置,其中,所述獲取至少一個歷史查詢語句,包括:
獲取通過所述歷史查詢語句查詢所述關聯存儲的歷史表格中的多個歷史表格的相關數據時所涉及的所述數據倉庫的歷史運行數據;
基于所述運行數據中確定所述至少一個歷史查詢語句。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于京東數字科技控股有限公司,未經京東數字科技控股有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201811111998.7/1.html,轉載請聲明來源鉆瓜專利網。





