[發明專利]數據治理系統

在審

• 申請號: 202110151709.1
• 申請日: 2021-02-04
• 公開（公告）號: CN112817956A
• 公開（公告）日: 2021-05-18
• 發明（設計）人: 高磊
• 申請（專利權）人: 北京易車互聯信息技術有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/23;G06F16/2458;G06F16/27;G06F21/60;G06F11/14
• 代理公司: 北京棘龍知識產權代理有限公司 11740
• 代理人: 李改平

本申請公開了一種數據治理系統，包括系統核心件、系統數據支撐數據庫、數據輸入模塊、數據標準比照篩除單元、元數據標準化比照篩除模塊、模型設計標準化比照篩除模塊、第一數據輸出模塊、數據分布模塊、數據集成模塊、數據質量檢查模塊、數據質量分析模塊、數據質量提升模塊、第二數據輸出模塊、數據編號模塊、資料備份數據庫、主數據庫、數據加密模塊、安全密鑰識別模塊、數據統計制表模塊、賬號登錄模塊、顯示模塊和操作模塊。本申請有益之處在于通過對數據的標準化、流程化使數據在準確性和安全性方面得到極大的提升，可以推動上游系統進行數據的更正，同時也可為決策層提供明確的數據支撐。

技術領域

本申請涉及一種數據系統，具體是數據治理系統。

背景技術

數據是事實或觀察的結果，是對客觀事物的邏輯歸納，是用于表示客觀事物的未經加工的原始素材；數據可以是連續的值，比如聲音、圖像，稱為模擬數據；也可以是離散的，如符號、文字，稱為數字數據；數據治理需要使用到數據治理系統。

現有數據治理的缺陷：第一、缺少統一的數據源采集系統；第一、缺少標準的數據字典及元數據管理字典；第三、缺少關系模型層，無層級劃分，無主題劃分；第四、缺少血緣關系映射系統，無法對任務上下級進行追蹤；第五、缺少統一的質量管理系統，無法對數據進行偏移量、值域、規范性等檢查；第六、缺少元數據管理系統，無法將數據項的業務含義與數據項進行關聯。現有的解決方案、業界的已知的技術方案：方案一、Dbus數據管理系統：可以提供實時或離線數據采集，且數據采集快；方案二、DataPipeline數據融合系統：以提供數據無縫式聚合實現的操作系統，通過配置不同的數據源及連接方式以及映射關系進行數據的融合。其中的不足為第一個問題是方案一是現在很多中小型公司使用的技術解決方案，支持大部分不同類型的數據源，同時支持實時數據采集和計算，但該方案不支持元數據管理，無法進行血緣關系的映射；第二個問題是方案二是一種簡單實用的數據整合工具，通過映射關系進行不同數據源之間的數據整合，但功能單一，無法進行大批量的計算，且元數據記錄混亂。因此，針對上述問題提出數據治理系統。

發明內容

為了解決現有技術的不足，本申請提供數據治理系統，包括系統核心件、資料備份數據庫和主數據庫，所述系統核心件的內部數據標準比照篩除單元、數據分布模塊、數據集成模塊、數據質量檢查模塊、數據質量分析模塊和數據質量提升模塊，所述數據標準比照篩除單元的一端與數據分布模塊的一端連接，所述數據分布模塊的另一端與數據集成模塊的一端連接，所述數據集成模塊的另一端與數據質量檢查模塊的一端連接，所述數據質量檢查模塊的另一端與數據質量分析模塊的一端連接，所述數據質量分析模塊的另一端與數據質量提升模塊的一端連接；所述數據標準比照篩除單元和數據質量提升模塊均連接至數據編號模塊的一端，所述數據編號模塊的另一端與資料備份數據庫以及主數據庫連接；所述資料備份數據庫和主數據庫均連接至數據加密模塊；所述數據加密模塊與賬號登錄模塊的一端連接，所述賬號登錄模塊的另一端與顯示模塊連接。

進一步地，所述系統核心件的內部設置有數據輸入模塊，所述數據輸入模塊與數據標準比照篩除單元的一端連接。

進一步地，所述數據標準比照篩除單元內部包括元數據標準化比照篩除模塊和模型設計標準化比照篩除模塊。

進一步地，所述系統核心件連接有系統數據支撐數據庫。

進一步地，所述數據標準比照篩除單元和數據分布模塊之間設置有第一數據輸出模塊，所述第一數據輸出模塊的一端與數據編號模塊連接。

進一步地，所述數據質量提升模塊與第二數據輸出模塊的一端連接，所述第二數據輸出模塊的另一端與數據編號模塊連接。

進一步地，所述系統數據支撐數據庫的一端與數據加密模塊連接。

進一步地，所述顯示模塊的一端與操作模塊連接，所述顯示模塊的另一端連接至系統核心件。

進一步地，所述主數據庫連接有數據統計制表模塊，所述數據統計制表模塊的一端與系統核心件連接。