[發明專利]一種處理數據的方法和裝置

在審

• 申請號: 202110349235.1
• 申請日: 2021-03-31
• 公開（公告）號: CN113111084A
• 公開（公告）日: 2021-07-13
• 發明（設計）人: 于海濱
• 申請（專利權）人: 北京沃東天駿信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F16/2455
• 分類號: G06F16/2455;G06F16/28
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 郝紅玉;郭晗

1.一種處理數據的方法，其特征在于，包括：

獲取數據倉庫中多個目標數據表以及多個所述目標數據表之間存在的直接關聯關系或者間接關聯關系；

根據多個所述目標數據表之間存在的所述直接關聯關系或者所述間接關聯關系以及所述目標數據表包括的字段，為多個所述目標數據表構建中間數據表；

在接收到針對多個所述目標數據表的處理請求時，從所述中間數據表中查找與所述處理請求相關的數據；

如果查找結果指示所述數據全部存儲于所述中間數據表，基于所述中間數據表處理所述數據；

如果查找結果指示所述數據部分存儲于所述中間數據表，基于所述中間數據表，從多個所述數據表中查找與所述處理請求相關的數據，并處理所述數據。

2.根據權利要求1所述的方法，其特征在于，獲取數據倉庫中多個目標數據表以及多個所述目標數據表之間存在的直接關聯關系或者間接關聯關系，包括：

獲取所述數據倉庫中的多個數據表；

在多個所述數據表中，查找具有相同字段的至少兩個目標數據表，并確定至少兩個所述目標數據表之間存在直接關聯關系；

根據多個所述直接關聯關系以及每一個所述直接關聯關系所對應的至少兩個所述目標數據表，確定多個所述目標數據表之間的間接關聯關系。

3.根據權利要求2所述的方法，其特征在于，確定多個所述目標數據表之間的間接關聯關系，包括：

為每一個所述直接關聯關系所對應的至少兩個所述目標數據表，構建關系字典；

根據所述關系字典，為每一個所述目標數據表查找存在間接關聯關系的其他目標數據表。

4.根據權利要求2所述的方法，其特征在于，確定多個所述目標數據表之間的間接關聯關系，包括：

將每一個所述目標數據表抽象為結點；

根據所述直接關聯關系，為多個所述結點構建對應的連接邊，得到關系圖；

根據所述關系圖，為每一個所述目標數據表查找存在間接關聯關系的其他目標數據表。

5.根據權利要求1所述的方法，其特征在于，

進一步包括：針對每一個所述目標數據表，為所述目標數據表所屬的直接關聯關系計算第一關聯數量，并為所述目標數據表所屬的間接關聯關系的每一層關系計算第二關聯數量；

結合所述第一關聯數量、所述第二關聯數量，執行為多個所述目標數據表構建中間數據表的步驟。

6.根據權利要求5所述的方法，其特征在于，所述為多個所述目標數據表構建中間數據表，包括：

根據多個所述目標數據表之間存在的所述直接關聯關系或者所述間接關聯關系，將多個所述目標數據表聚類為多種類別；

根據多種所述類別所包括的所述目標數據表的第一關聯數量和第二關聯數量，構建中間層數據表和至少一個外層數據表；

組合所述中間層數據表和至少一個所述外層數據表，得到所述中間數據表。

7.根據權利要求6所述的方法，其特征在于，所述構建中間層數據表，包括：

針對每一種所述類別，根據所述類別包括的每一個所述目標數據表的第一關聯數量和第二關聯數量，在預設關聯層級內計算每一個所述目標數據表的關聯數量；

為每一個所述類別選擇關聯數量最大的目標數據表；

根據每一個所述類別中關聯數量最大的目標數據表的字段，構建所述中間層數據表中的字段。

8.根據權利要求7所述的方法，其特征在于，所述構建至少一個外層數據表，包括：

針對每一個所述類別，循環執行下述步驟N1至N4，滿足循環停止條件，

N1：從所述類別中選擇未被選擇過的關聯數量最小的目標數據表；

N2：根據當前關聯數量最小的目標數據表和關聯數量最大的目標數據表中的字段，構建臨時數據表中的字段；

N3：結合所述中間層數據表的字段和所述臨時數據表的字段，計算所述類別的關聯度；

N4：判斷所述關聯度是否滿足預設的關聯條件，如果是，則確定所述臨時數據表為所述類別的外層數據表，并結束循環；否則，執行步驟N1。