[發明專利]一種數據圖譜分析系統以及方法

在審

• 申請號: 201711424043.2
• 申請日: 2017-12-25
• 公開（公告）號: CN108197182A
• 公開（公告）日: 2018-06-22
• 發明（設計）人: 闕子揚;曹博睿;掌建軍;趙衛
• 申請（專利權）人: 百味云科技股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京德恒律治知識產權代理有限公司 11409
• 代理人: 章社杲;盧軍峰

1.一種數據圖譜分析系統，其特征在于，包括：

數據處理模塊，所述數據處理模塊包括元數據采集單元、以及與所述元數據采集單元連接的數據流向分析單元；

數據存儲模塊，所述數據存儲模塊包括與所述數據流向分析單元連接的數據圖譜存儲單元；

數據展示模塊，所述數據展示模塊包括與所述數據圖譜存儲單元連接的數據圖譜展示單元；

其中，所述元數據采集單元用于從各個生產數據庫和分析數據庫收集元數據，所述數據流向分析單元利用解析工具JSQLParser分析ETL腳本，并結合所述元數據，得到所述各個生產數據庫和分析數據庫之間表和字段層級的關聯信息，所述關聯信息存入所述數據圖譜存儲單元，所述數據圖譜展示單元用于展示圖形化的所述關聯信息。

2.根據權利要求1所述的數據圖譜分析系統，其特征在于，

所述元數據采集單元還用于通過工作流管理平臺Airflow對收集元數據的流程進行調度。

3.根據權利要求1所述的數據圖譜分析系統，其特征在于，所述數據圖譜展示單元通過spring boot框架、Neo4j數據庫和echarts構建數據字典和數據圖譜展示頁面以展示圖形化的所述關聯信息。

4.根據權利要求1所述的數據圖譜分析系統，其特征在于，其中所述數據圖譜存儲單元包括Neo4j數據庫，所述關聯信息存入所述Neo4j數據庫中。

5.根據權利要求1所述的數據圖譜分析系統，其特征在于，所述數據存儲模塊還包括與所述元數據采集單元連接的元數據存儲單元，其中所述元數據采集單元將收集的元數據集成到所述元數據存儲單元中。

6.根據權利要求5所述的數據圖譜分析系統，其特征在于，所述數據展示模塊還包括元數據管理單元，所述元數據管理單元用于提供查詢和展示界面以查看和查詢所述元數據。

7.一種數據圖譜分析方法，其特征在于，包括：

S1，從各個生產數據庫和分析數據庫收集元數據；

S2，利用解析工具JSQLParser分析ETL腳本，并結合所述元數據，得到所述各個生產數據庫和分析數據庫之間表和字段層級的關聯信息；

S3，展示圖形化的所述關聯信息。

8.根據權利要求7所述的數據圖譜分析方法，其特征在于，步驟S1還包括：通過工作流管理平臺Airflow對收集元數據的流程進行調度。

9.根據權利要求7所述的數據圖譜分析方法，其特征在于，步驟S3具體包括：通過spring boot框架、Neo4j數據庫和echarts構建數據字典和數據圖譜展示頁面以展示圖形化的所述關聯信息。