[發明專利]圖譜數據處理方法及裝置

在審

• 申請號: 202110845312.2
• 申請日: 2021-07-26
• 公開（公告）號: CN113704484A
• 公開（公告）日: 2021-11-26
• 發明（設計）人: 金賀
• 申請（專利權）人: 青島海爾科技有限公司;海爾智家股份有限公司
• 主分類號: G06F16/36
• 分類號: G06F16/36;G06F16/18;G06F16/28;G06F16/332
• 代理公司: 北京路浩知識產權代理有限公司 11002
• 代理人: 吳剛

本發明提供一種圖譜數據處理方法及裝置，該圖譜數據處理方法包括：獲取日志數據；在確認日志數據中存在關鍵字的情況下，對日志數據進行解析，得到多個目標數據表標識以及多個目標數據表標識之間的關系信息；基于關系信息，從多個目標數據表標識中篩選出具有依賴關系的作為依賴數據表標識；基于依賴數據表標識以及對應的關系信息，生成目標圖譜數據；輸出目標圖譜數據。本發明提供的圖譜數據處理方法及裝置，判斷日志數據中是否存在關鍵字，在存在關鍵字的情況下，才對日志數據進行解析，并根據關系信息篩選出具有依賴關系的作為依賴數據表標識，能排除無關數據，且能將不存在依賴關系的數據進行排除，能提高目標圖譜數據的有效性。

技術領域

本發明涉及大數據技術領域，尤其涉及一種圖譜數據處理方法及裝置。

背景技術

目前，在各種單位數字化建設的過程中，數據倉庫已經成為了重要的環節，為單位的營銷以及運營等過程的數據分析提供了大量的支持，隨著業務需求的增加，數據倉庫的管理難度也相應增加了，而這種管理難度增加主要體現在數據表數量的增加以及數據表之間的依賴關系復雜，提升了數據開發人員的開發和管理成本。

目前的圖譜數據處理方法，存在較多的無關數據，對有效數據造成干擾，使得數據有效性較差。

發明內容

本發明提供一種圖譜數據處理方法及裝置，用以解決現有技術中存在較多的無關數據，對有效數據造成干擾，使得數據有效性較差的缺陷，實現排除無關數據，且能夠將不存在依賴關系的數據進行排除，能夠提高目標圖譜數據的有效性。

本發明提供一種圖譜數據處理方法，該圖譜數據處理方法包括：獲取日志數據；在確認所述日志數據中存在關鍵字的情況下，對所述日志數據進行解析，得到多個目標數據表標識以及多個所述目標數據表標識之間的關系信息；基于所述關系信息，從多個目標數據表標識中篩選出具有依賴關系的作為依賴數據表標識；基于所述依賴數據表標識以及對應的所述關系信息，生成目標圖譜數據；輸出所述目標圖譜數據。

根據本發明提供的一種圖譜數據處理方法，該圖譜數據處理方法還包括：在確認所述日志數據中不存在關鍵字的情況下，基于所述日志數據生成消息流信息，所述消息流信息用于記錄數據處理過程，不參與圖譜數據構建；輸出所述消息流信息。

根據本發明提供的一種圖譜數據處理方法，該圖譜數據處理方法還包括：基于所述關系信息，從多個目標數據表標識中篩選出不具有依賴關系的作為獨立數據表標識；基于所述獨立數據表標識，生成消息流信息，所述消息流信息用于記錄數據處理過程，不參與圖譜數據構建；輸出所述消息流信息。

根據本發明提供的一種圖譜數據處理方法，所述輸出所述目標圖譜數據，包括：將所述目標圖譜數據寫入到圖譜數據庫設備，以供所述圖譜數據庫設備構建圖譜數據網絡。

本發明還提供一種圖譜數據處理裝置，該圖譜數據處理裝置包括：獲取模塊，用于獲取日志數據；解析模塊，用于在確認所述日志數據中存在關鍵字的情況下，對所述日志數據進行解析，得到多個目標數據表標識以及多個所述目標數據表標識之間的關系信息；篩選模塊，用于基于所述關系信息，從多個目標數據表標識中篩選出具有依賴關系的作為依賴數據表標識；生成模塊，用于基于所述依賴數據表標識以及對應的所述關系信息，生成目標圖譜數據；輸出模塊，用于輸出所述目標圖譜數據。

根據本發明提供的一種圖譜數據處理裝置，該圖譜數據處理裝置還包括：第二消息流信息生成模塊，用于基于所述關系信息，從多個目標數據表標識中篩選出不具有依賴關系的作為獨立數據表標識；基于所述獨立數據表標識，生成消息流信息，所述消息流信息用于記錄數據處理過程，不參與圖譜數據構建；輸出所述消息流信息。

根據本發明提供的一種圖譜數據處理裝置，所述輸出模塊還用于：將所述目標圖譜數據寫入到圖譜數據庫設備，以供所述圖譜數據庫設備構建圖譜數據網絡。