[發明專利]數據關系識別方法、裝置、電子設備及存儲介質在審
| 申請號: | 202110702568.8 | 申請日: | 2021-06-24 |
| 公開(公告)號: | CN113434542A | 公開(公告)日: | 2021-09-24 |
| 發明(設計)人: | 謝崢 | 申請(專利權)人: | 平安國際智慧城市科技股份有限公司 |
| 主分類號: | G06F16/2453 | 分類號: | G06F16/2453;G06F16/2455;G06F16/28 |
| 代理公司: | 深圳市沃德知識產權代理事務所(普通合伙) 44347 | 代理人: | 高杰;于志光 |
| 地址: | 518000 廣東省深圳市前海深港合*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據 關系 識別 方法 裝置 電子設備 存儲 介質 | ||
1.一種數據關系識別方法,其特征在于,所述方法包括:
從至少一個業務系統中獲取元數據,對所述元數據進行差異性分析,得到所述元數據的差異性分析報告;
根據所述差異性分析報告,對所述元數據進行層級拆分,并將層級拆分后的元數據中具有相同數據類型的元數據進行聚類,生成多個聚類元數據;
對每個所述聚類元數據進行數據質量校驗,得到數據質量校驗報告;
根據所述數據質量校驗報告,構建每個所述聚類元數據的數據表,并識別所述數據表中任意兩個元數據之間的關系,得到關系識別結果。
2.如權利要求1所述的數據關系識別方法,其特征在于,所述對所述元數據進行差異分析,得到所述元數據的差異性分析報告,包括:
獲取所述元數據的數據類型,查詢所述數據類型對應的歷史數據;
將所述元數據與所述歷史數據進行差異對比,得到差異對比結果;
根據所述差異對比結果,生成所述元數據的差異性分析報告。
3.如權利要求1所述的數據關系識別方法,其特征在于,所述根據所述差異性分析報告,對所述元數據進行層級拆分,包括:
根據所述差異性分析報告,識別所述元數據中的歷史元數據和增量元數據;
查詢所述歷史元數據的歷史節點關系,根據所述歷史節點關系,執行所述歷史元數據的層級拆分;
配置所述增量元數據的實時節點關系,根據所述實時節點關系,執行所述增量元數據的層級拆分。
4.如權利要求3所述的數據關系識別方法,其特征在于,所述配置所述增量元數據的實時節點關系,包括:
獲取所述增量元數據的數據標識字段,根據所述數據標識字段,定義所述增量元數據的節點層級位置;
根據所述節點層級位置,生成所述增量元數據的實時節點關系。
5.如權利要求1所述的數據關系識別方法,其特征在于,所述將層級拆分后的元數據中具有相同數據類型的元數據進行聚類,包括:
利用下述公式將層級拆分后的元數據中具有相同數據類型的元數據進行聚類:
其中,E表示聚類元數據的聚類中心點,K表示聚類中心點的數量,c表示層級拆分后的元數據的數量,xt表示第t個層級拆分后的元數據,μi表示第i個聚類中心點的簇心質量。
6.如權利要求1至5中任意一項所述的數據關系識別方法,其特征在于,所述對每個所述聚類元數據進行數據質量校驗,得到數據質量校驗報告,包括:
利用預設的數據約束條件對每個所述聚類元數據中所有元數據進行合法校驗,得到數據校驗結果;
利用預設的字段約束條件對每個所述聚類元數據中所有元數據的數據字段進行留存校驗,得到字段校驗結果;
根據所述數據校驗結果和字段校驗結果,生成每個所述聚類元數據的數據質量校驗報告。
7.如權利要求1所述的數據關系識別方法,其特征在于,所述根據所述數據質量校驗報告,構建每個所述聚類元數據的數據表,包括:
根據所述數據質量校驗報告,識別每個所述聚類元數據中非法元數據及非法標識字段;
對所述非法元數據及非法標識字段進行過濾,得到目標聚類元數據;
采用鍵值對的形式構建所述目標聚類元數據的數據表。
8.一種數據關系識別裝置,其特征在于,所述裝置包括:
數據差異性分析模塊,用于從至少一個業務系統中獲取元數據,對所述元數據進行差異性分析,得到所述元數據的差異性分析報告;
數據層級拆分模塊,用于根據所述差異性分析報告,對所述元數據進行層級拆分,并將層級拆分后的元數據中具有相同數據類型的元數據進行聚類,生成多個聚類元數據;
數據質量校驗模塊,用于對每個所述聚類元數據進行數據質量校驗,得到數據質量校驗報告;
數據關系識別模塊,用于根據所述數據質量校驗報告,構建每個所述聚類元數據的數據表,并識別所述數據表中任意兩個元數據之間的關系,得到關系識別結果。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于平安國際智慧城市科技股份有限公司,未經平安國際智慧城市科技股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202110702568.8/1.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





