[發明專利]一種基于大數據分析的數據資產管理方法

在審

• 申請號: 202011310520.4
• 申請日: 2020-11-20
• 公開（公告）號: CN112463777A
• 公開（公告）日: 2021-03-09
• 發明（設計）人: 嚴宇平;王建永;錢正浩;蔡徽
• 申請（專利權）人: 廣東電網有限責任公司;廣東電力信息科技有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/23
• 代理公司: 深圳至誠化育知識產權代理事務所(普通合伙) 44728
• 代理人: 劉英

本發明公開了一種基于大數據分析的數據資產管理方法，包括以下步驟：S1、評估數據質量，探查數據內容、結構和異常；S2、建立數據質量管理方針并明確目標；S3、確定數據質量問題原因，設計和實施數據質量業務規則，制定提高方案；S4、形成完善的數據質量監控，包括預防控制、過程控制和監督控制機制；S5、定期開展數據質量的檢查和清洗工作；S6、對照目標，監測數據質量，在整個業務應用中持續監測和管理數據質量，歸檔和溝通質量管理效果、所做的改進和改進的結果。本發明通過建立數據質量管理方針以及完善的數據質量監控，能夠強化源頭數據、對數據加工卡點校驗，在數據的維護和使用過程中持續監測和管理數據質量。

技術領域

本發明涉及資產大數據管理技術領域，尤其涉及一種基于大數據分析的數據資產管理方法。

背景技術

數據資產管理的定義為：數據資產管理是規劃、控制和提供數據及信息資產的一組業務職能，包括開發、執行和監督有關數據的計劃、政策、方案、項目、流程、方法和程序，從而控制、保護、交付和提高數據資產的價值。

數據資產管理一般地認為有十大數據管理職能：數據治理、數據架構管理、數據開發、數據操作管理、數據安全管理、參考數據和主數據管理、數據倉庫和商務智能管理、文檔和內容管理、元數據管理和數據質量管理，其中數據質量與業務績效之間存在著直接聯系，高質量的數據可以使公司保持競爭力并在經濟動蕩時期立于不敗之地。有了普遍深入的數據質量，企業在任何時候都可以信任滿足所有需求的所有數據。

目前，企業對于數據質量管理不到位，無法通過有效的數據質量控制手段，進行數據的管理和控制，不能消除數據質量問題進而提升企業數據變現的能力，為此，我們提出一種基于大數據分析的數據資產管理方法來解決上述問題。

發明內容

基于背景技術提出的技術問題，本發明提出了一種能夠準確地評估數據質量，能夠確定數據質量問題的根本原因，從而可以更加準確地找出需要改進的地方加以改進，并且通過建立數據質量管理方針以及完善的數據質量監控，能夠強化源頭數據、對數據加工卡點校驗，在數據的維護和使用過程中持續監測和管理數據質量的基于大數據分析的數據資產管理方法。

本發明提出的一種基于大數據分析的數據資產管理方法，包括以下步驟：

S1、評估數據質量，探查數據內容、結構和異常，選擇對應的數據質量維度，評估數據質量，評估結果用來確定數據質量問題的根本原因、需要改進的地方；

S2、建立數據質量管理方針并明確目標，選取若干個指標來作為數據質量評價指標，建立數據質量評估模型，對企業的數據進行評估和測量，固化數據標準，優化數據管理流程；

S3、確定數據質量問題原因，設計和實施數據質量業務規則，制定提高方案，引起數據質量問題的根本原因，并區分優先次序，以及為解決這些問題的具體建議，明確企業的數據質量規則；

S4、形成完善的數據質量監控，包括預防控制、過程控制和監督控制機制，強化源頭數據質量，在數據的維護和使用過程中去監控和處理數據質量，基于數據的元模型配置數據質量規則，即針對不同的數據對象，配置相應的數據質量指標；

S5、定期開展數據質量的檢查和清洗工作，設置成手動執行或定期自動執行的系統任務，通過執行檢查任務對存量數據進行檢查，形成數據質量問題清單；

S6、對照目標，監測數據質量，在整個業務應用中持續監測和管理數據質量，歸檔和溝通質量管理效果、所做的改進和改進的結果。

優選地，在S1中，探查數據以發現和評估數據的內容、結構和異常，識別數據的優勢和弱勢，明確指出數據錯誤和問題。

優選地，在S2中，數據質量評價指標包括：數據唯一性、數據完整性、數據準確性、數據一致性、數據關聯性、數據及時性等。