[發明專利]一種基于大數據的數據治理方法和系統

有效

• 申請號: 202110252566.3
• 申請日: 2021-03-09
• 公開（公告）號: CN112632057B
• 公開（公告）日: 2021-05-25
• 發明（設計）人: 鄭瑋琨;盤思樂;梁麟
• 申請（專利權）人: 深圳信息職業技術學院
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/25
• 代理公司: 深圳市科吉華烽知識產權事務所(普通合伙) 44248
• 代理人: 胡玉

1.一種基于大數據的數據治理方法，其特征在于，所述方法包含：

步驟S1：啟動數據節點發起數據治理，并確定數據治理范圍；

步驟S2：在數據治理范圍的確定過程中確定控制節點；

步驟S3：控制節點基于系統圖確定數據治理子圖；

步驟S4：基于數據治理子圖作數據交換和共享；

啟動條件，具體為：當收到啟動觸發指令時，啟動條件滿足；

為特定數據節點設置定時裝置，當定時時間點到達時，所述特定數據節點成為啟動數據節點；

滿足所述啟動條件的啟動數據節點發起數據治理并得到數據治理范圍，具體為：啟動數據節點隨機選擇P個直接相連的數據節點，發起啟動指令給P個數據節點并將所述P個數據節點歸入當前數據治理范圍；所述P個數據節點中的每個數據節點重復隨機選擇P個直接相連的數據節點、發起啟動指令、歸入當前數據治理范圍的步驟，直到終止條件滿足；

在發起啟動指令之前，將接收到的啟動指令中上一級數據節點的歷史平均繁忙程度和當前數據節點的繁忙程度比較，將其中的繁忙程度較小者及其對應的數據節點標識包含在啟動指令中發出；

所述終止條件為：當前數據治理范圍中的數據節點數量達到預設數量；

當前數據節點在發出啟動指令前，請求將其選擇的P個數據節點加入數據治理范圍，如果加入所述P個數據節點后未超過數據治理范圍大小，則允許并將所述P個數據節點加入數據治理范圍；如果加入所述P個數據 節點后超過數據治理范圍，則終止條件滿足，后續發出的加入數據范圍的請求將均被拒絕；數據治理范圍為參與本次數據治理的數據節點集合；數據治理范圍的大小為數據節點集合的大小。

2.根據權利要求1所述的基于大數據的數據治理方法，其特征在于，預設數量為1000。

3.一種采用權利要求1的基于大數據的數據治理方法的基于大數據的數據治理系統，其特征在于，所述系統包括：多個相互連接的數據節點，所述數據節點用于保存業務系統的數據；數據節點之間存在或不存在直接連接關系；將數據節點及其連接關系用系統圖表示；每個數據節點為系統圖中的一個節點。

4.根據權利要求3所述的基于大數據的數據治理系統，其特征在于，業務系統的數據為大數據。

5.根據權利要求4所述的基于大數據的數據治理系統，其特征在于，客戶端用于發起數據訪問請求，并從業務系統接收業務系統訪問請求的請求結果。

6.根據權利要求5所述的基于大數據的數據治理系統，其特征在于，業務系統的數據保存在一個或多個數據節點上。

7.根據權利要求6所述的基于大數據的數據治理系統，其特征在于，數據節點還用于根據數據治理指令作數據轉移和共享。