[發明專利]一種數據加工方法、裝置、存儲介質及電子設備

在審

• 申請號: 202110282084.2
• 申請日: 2021-03-16
• 公開（公告）號: CN113010519A
• 公開（公告）日: 2021-06-22
• 發明（設計）人: 張勝言;陸祺;賴婉英;黎洪達;覃鵬
• 申請（專利權）人: 建信金融科技有限責任公司
• 主分類號: G06F16/22
• 分類號: G06F16/22
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

1.一種數據加工方法，其特征在于，包括：

獲取基礎指標庫中的基礎數據；

根據所述基礎數據和預設聚合指標配置參數，得到目標動態表；

對所述目標動態表中的數據進行加工，得到聚合數據，并將所述聚合數據存儲到目標聚合表。

2.根據權利要求1所述的方法，其特征在于，根據所述基礎數據和預設聚合指標配置參數，得到目標動態表，包括：

根據預設聚合指標配置參數，創建待處理動態表；

將所述基礎數據按照預設存儲規則存儲到所述待處理動態表，得到目標動態表。

3.根據權利要求2所述的方法，其特征在于，所述預設聚合指標配置參數包括指標名稱、指標描述、指標結構、依賴的基礎指標和加工指標執行器。

4.根據權利要求1所述的方法，其特征在于，所述目標動態表包括GP動態表；其中，所述GP動態表包括公共部分和數據部分；所述公共部分包括日期、渠道和機構；所述數據部分包括字段名稱、類型和相關特性。

5.根據權利要求4所述的方法，其特征在于，所述渠道包括手機銀行、網上銀行、融支付以及第三方應用；所述機構包括至少兩個層級的機構。

6.根據權利要求1所述的方法，其特征在于，對所述目標動態表中的數據進行加工，得到聚合數據，并將所述聚合數據存儲到目標聚合表，包括：

將所述目標動態表中的數據存儲到目標對接表；

利用預設處理規則對所述目標對接表中的數據進行處理，得到聚合數據，并將所述聚合數據存儲到目標聚合表。

7.根據權利要求6所述的方法，其特征在于，所述目標對接表包括HIVE對接表；

相應的，將所述目標動態表中的數據存儲到目標對接表，包括：

將所述目標動態表中的數據轉換為目標文件；

將所述目標文件存儲到HIVE對接表。

8.根據權利要求7所述的方法，其特征在于，在將所述目標文件存儲到HIVE對接表之后，所述方法還包括：

根據各HIVE對接表和預設機構表，得到最終的HIVE對接表。

9.根據權利要求8所述的方法，其特征在于，所述預設機構表包括機構名稱和機構點；

相應的，根據各HIVE對接表和預設機構表，得到最終的HIVE對接表，包括：

根據所述機構名稱和機構點，確定第一層級機構和第二層級機構的關聯關系；其中，所述第二層級機構為第一層級機構的下級機構；

根據所述關聯關系，對各HIVE對接表進行整合，得到最終的HIVE對接表。

10.根據權利要求6所述的方法，其特征在于，利用預設處理規則對所述目標對接表中的數據進行處理，得到聚合數據，并將所述聚合數據存儲到目標聚合表，包括：

利用機構和渠道按照預設處理規則將目標對接表中的數據進行整合，得到聚合數據，并將所述聚合數據存儲到目標聚合表。

11.根據權利要求1所述的方法，其特征在于，在對所述目標動態表中的數據進行加工，得到聚合數據，并將所述聚合數據存儲到目標聚合表之后，所述方法還包括：

將所述目標聚合表存儲到HBASE數據庫，并按照預設顯示規則在前端頁面上顯示所述目標聚合表，供用戶查看聚合數據。

12.根據權利要求1所述的方法，其特征在于，在獲取基礎指標庫中的基礎數據之前，所述方法還包括：

將至少一個機構的源表進行整合，存儲到基礎指標庫。