[發明專利]一種數據血緣關系管理方法、系統及存儲介質在審

申請號：	202010761536.0	申請日：	2020-07-31
公開（公告）號：	CN114064632A	公開（公告）日：	2022-02-18
發明（設計）人：	趙正委	申請（專利權）人：	中移(蘇州)軟件技術有限公司;中國移動通信集團有限公司
主分類號：	G06F16/22	分類號：	G06F16/22;G06F16/242;G06F16/2453;G06F16/25;G06F16/28;G06F16/901;G06F8/41
代理公司：	北京派特恩知識產權代理有限公司 11270	代理人：	李洋;張穎玲
地址：	215163 江蘇***	國省代碼：	江蘇;32
權利要求書：	查看更多	說明書：	查看更多
摘要：
搜索關鍵詞：	一種數據血緣關系管理方法系統存儲介質
鉆瓜網技術展會專利詞庫專利權人專利榜在售專利公布日期熱門專利

【說明書】：

本發明實施例公開了一種數據血緣關系管理方法、系統及存儲介質，能夠降低數據血緣關系的管理復雜度，并提高查詢效率，該方法可以包括：數據構造解析器；與數據構造解析器連接的語法樹構造解析器；與語法樹構造解析器連接的圖數據庫模塊；其中，數據構造解析器，用于對從業務系統發送的數據源變動數據進行解析，得到數據血緣關系結構數據；語法樹構造解析器，用于將數據血緣關系結構數據轉換成與圖數據庫模塊適配的多層語法樹實例；圖數據庫模塊，用于存儲并管理多層語法樹實例對應的圖結構數據，圖結構數據用于表征多層語法樹實例中每個節點的圖屬性數據和不同節點之間的數據血緣關系路徑；圖屬性數據包括每個節點對應的數據表和/或數據表字段。

技術領域

本發明涉及計算機軟件領域，尤其涉及一種數據血緣關系管理方法、系統及存儲介質。

背景技術

伴隨互聯網行業的高速發展，大數據已經成為新的趨勢和常態。許多大型網站、大型企業每天生產大量的數據。在交通、物流、電商、市政、工業生產等領域，大量數據每天不斷累積。在對這些大量數據進行分析處理、挖掘有用信息的過程中，需要進行數據采集、數據清洗、數據預處理、數據存儲、數據分析、數據挖掘等過程。在這個過程中，數據流轉多種存儲介質，并在多種存儲介質中以多種形式進行流轉或存儲。如何記錄、管理和展示數據在流轉過程種的關聯關系，成為一個必備的需求應運而生，而這些數據流轉過程中的關聯關系就是大數據血緣關系。

現有技術是通過創建數據倉庫，在數據倉庫中創建大量的數據關聯關系表，來存儲和管理數據流轉中的數據血緣關系。而數據倉庫由傳統的關系型數據庫來構建完成，當數據量越來越大，數據源類型越來越多，就需要在關系型數據庫中創建越來越多的關聯關系表用于記錄數據之間的血緣關系。導致數據血緣關系的管理復雜度高，查詢效率低的問題。

發明內容

為解決上述技術問題，本發明實施例期望提供一種數據血緣關系管理方法、系統及存儲介質，能夠降低數據血緣關系的管理復雜度，并提高查詢效率。

本發明的技術方案是這樣實現的：

本發明實施例中一種數據管理系統，所述系統包括：

數據構造解析器；

與所述數據構造解析器連接的語法樹構造解析器；

與所述語法樹構造解析器連接的圖數據庫模塊；其中，

所述數據構造解析器，用于對從業務系統發送的數據源變動數據進行解析，得到數據血緣關系結構數據；

所述語法樹構造解析器，用于將所述數據血緣關系結構數據轉換成與所述圖數據庫模塊適配的多層語法樹實例；

所述圖數據庫模塊，用于存儲并管理所述多層語法樹實例對應的圖結構數據，所述圖結構數據用于表征所述多層語法樹實例中每個節點的圖屬性數據和不同節點之間的數據血緣關系路徑；所述圖屬性數據包括每個節點對應的數據表和/或數據表字段。

在上述系統中，所述系統還包括：處理器；所述處理器分別與所述數據構造解析器、所述語法樹構造解析器和所述圖數據庫模塊連接；

所述處理器，用于層次遍歷所述多層語法樹實例的每個節點，在所述多層語法樹實例的每個節點處采集每個節點對應的圖結構數據。