[發明專利]大數據治理中基于元數據和數據分析技術實現系統數據架構梳理的方法

在審

• 申請號: 202010519541.0
• 申請日: 2020-06-09
• 公開（公告）號: CN111611458A
• 公開（公告）日: 2020-09-01
• 發明（設計）人: 滑少鵬;曹宗偉
• 申請（專利權）人: 普元信息技術股份有限公司
• 主分類號: G06F16/907
• 分類號: G06F16/907;G06F16/906;G06F16/9038;G06F16/242;G06F16/215
• 代理公司: 上海智信專利代理有限公司 31002
• 代理人: 王潔;鄭暄

1.一種大數據治理中基于元數據和數據分析技術實現系統數據架構梳理的方法，其特征在于，所述的方法包括以下步驟：

(1)系統信息錄入，記錄系統基本情況；

(2)通過標準元數據采集工具采集技術元數據；

(3)通過模擬系統業務場景采集系統中的數據流向，從系統的業務場景為源點采集業務元數據；

(4)通過業務元數據的關聯分析元數據鏈路；

(5)識別業務元數據與技術元數據的業務含義；

(6)通過對不同維度元數據進行聚類、匯總、統計排序的分析策略，分析數據能力、數據全景和數據熱度。

2.根據權利要求1所述的大數據治理中基于元數據和數據分析技術實現系統數據架構梳理的方法，其特征在于，所述的步驟(1)的系統基本情況包括系統名稱、系統編碼、系統供應商、系統版本號、上線時間、數據庫信息、業務特性、菜單信息和功能信息。

3.根據權利要求1所述的大數據治理中基于元數據和數據分析技術實現系統數據架構梳理的方法，其特征在于，所述的步驟(2)的采集技術元數據包含客戶端和服務端兩部分，客戶端與應用系統數據庫適配并采集數據，服務端對數據進行整合及可視化展現，描述數據庫之間、表之間以及字段之間的關聯關系。

4.根據權利要求1所述的大數據治理中基于元數據和數據分析技術實現系統數據架構梳理的方法，其特征在于，所述的步驟(3)中業務元數據的采集范圍包括業務特性、菜單、功能、API、界面、表單、請求、SQL、表和字段。

5.根據權利要求1所述的大數據治理中基于元數據和數據分析技術實現系統數據架構梳理的方法，其特征在于，所述的步驟(4)具體包括以下步驟：

(4.1)對重復或相似的業務元數據進行合并；

(4.2)形成業務元數據的血緣分析、影響分析、全鏈分析。

6.根據權利要求5所述的大數據治理中基于元數據和數據分析技術實現系統數據架構梳理的方法，其特征在于，所述的步驟(4.2)具體為：

通過數據之間的關聯性，對業務元數據進行鏈路分析，以掌握數據的影響程度，形成業務元數據的血緣分析、影響分析、全鏈分析。

7.根據權利要求1所述的大數據治理中基于元數據和數據分析技術實現系統數據架構梳理的方法，其特征在于，所述的步驟(5)具體包括以下步驟：

(5.1)將采集到的業務元數據與技術元數據充分結合，快速識別數據的業務含義；

(5.2)業務元數據與技術元數據通過表進行關聯，并根據業務元數據中獲取到的功能、界面、表單、請求、SQL和表之間的關聯關系識別字段的業務含義，并回寫至技術元數據中的字段內。

8.根據權利要求1所述的大數據治理中基于元數據和數據分析技術實現系統數據架構梳理的方法，其特征在于，所述的步驟(6)中的分析數據能力的步驟具體包括以下處理過程：

通過對業務元數據中的功能和表單，以及技術元數據中的表和字段進行聚類分析。

9.根據權利要求1所述的大數據治理中基于元數據和數據分析技術實現系統數據架構梳理的方法，其特征在于，所述的步驟(6)中的分析數據能力的步驟具體包括以下處理過程：

通過對元數據鏈路的匯總計算，展示系統中所有表之間的關聯關系，形成系統數據全景圖。

10.根據權利要求1所述的大數據治理中基于元數據和數據分析技術實現系統數據架構梳理的方法，其特征在于，所述的步驟(6)中的分析數據熱度的步驟具體包括以下處理過程：

通過對系統中表的被關聯的次數進行統計排序，找出被關聯次數較多的表，將其作為系統的核心數據。