[發明專利]輕量級多源異構數據融合方法及系統

有效

• 申請號: 202210568465.1
• 申請日: 2022-05-24
• 公開（公告）號: CN114661810B
• 公開（公告）日: 2022-08-16
• 發明（設計）人: 姚冰峰;郭大琦;郭蘭蘭;武寬;劉彪;宋佳;俞雋亞;何岳昊
• 申請（專利權）人: 國網浙江省電力有限公司杭州供電公司;國網浙江省電力有限公司桐廬縣供電公司
• 主分類號: G06F16/25
• 分類號: G06F16/25;G06F16/22;G06F16/906;G06K9/62
• 代理公司: 杭州華鼎知識產權代理事務所(普通合伙) 33217
• 代理人: 魏亮

本發明提供一種輕量級多源異構數據融合方法及系統，包括：對數據源分類得到主數據源和從數據源，將具有相同數據主體的從數據源歸類為一個從數據集合；根據數據主體在主數據源的主數據屬性、以及從數據集合中的至少一個從數據屬性，生成相對應的多源異構模板；基于多源異構模板對主數據源和從數據源內相對應的主電力數據、從電力數據進行輕量化的采集融合，得到每個數據主體的多源異構數據；根據每個多源異構數據的數據結構對所有的多源異構數據進行分類，獲取具有不同數據結構的多源異構數據中的差異結構數據，生成相應多源異構數據的差異標簽；將多個數據主體的多源異構數據根據其數據結構存儲至具有不同差異標簽的數據結構存儲單元內。

技術領域

本發明涉及數據處理技術領域，尤其涉及一種輕量級多源異構數據融合方法及系統。

背景技術

多源異構簡單而言就是指一個整體由多個不同來源的成分而構成，既有混合型數據（包括結構化和非結構化）又有離散性數據（數據分布在不同的系統或平臺），互聯網就是一個典型的異構網絡，融合傳播矩陣就是一個典型的多源異構數據網絡。

在電網系統中，多源至少可以包括用電行為的個人用戶源、企業用戶源、以及電網對電力進行管理的管理源。個人用戶源所產生的數據可以例如每個用戶的用電費用、用電分配（取暖用電費用、照明用電費用、文娛用電費用、烹調用電費用、生活用電費用），企業用戶源可以例如每個企業的用電費用、用電分配（取暖用電費用、照明用電費用、生產用電費用），管理源所產生的數據可以是對某個用戶、企業的維修數據、負責人數據等等。

以企業為例，其不同的用電分配可以體現出其在生產經營中耗能較多、耗能較少的行為，根據不同的耗能行為能夠為后續相應目標區域內的電網建設進行指導。在現有技術中，還無法將多種類型的多源異構數據進行相應的融合，并且電網中的數據巨大，所以亟需一種輕量級多源異構數據融合的技術方案，實現輕量的多源異構的數據融合。

發明內容

本發明實施例提供一種輕量級多源異構數據融合方法及系統，能夠將多種類型的多源異構數據進行相應的融合，并進行輕量化的存儲，實現輕量的多源異構的數據融合。

本發明實施例的第一方面，提供的輕量級多源異構數據融合方法，包括：

對電網中的所有數據源進行分類得到主數據源和從數據源，若判斷從數據源為多個，則獲取每個從數據源所對應的數據主體，將具有相同數據主體的從數據源歸類為一個從數據集合；

依次獲取每一個主數據源的數據主體，確定與所述數據主體相對應的從數據集合，根據所述數據主體在主數據源的主數據屬性、以及從數據集合中的至少一個從數據屬性，生成相對應的多源異構模板；

基于所述多源異構模板對主數據源和從數據源內相對應的主電力數據、從電力數據進行輕量化的采集融合，得到每個數據主體的多源異構數據；

根據每個多源異構數據的數據結構對所有的多源異構數據進行分類，獲取具有不同數據結構的多源異構數據中的差異結構數據，根據所述差異結構數據生成相應多源異構數據的差異標簽；

根據所述差異標簽生成不同的數據結構存儲單元，將多個數據主體的多源異構數據根據其數據結構存儲至具有不同差異標簽的數據結構存儲單元內。

可選地，在第一方面的一種可能實現方式中，所述對電網中的所有數據源進行分類得到主數據源和從數據源，若判斷從數據源為多個，則獲取每個從數據源所對應的數據主體，將具有相同數據主體的從數據源歸類為一個從數據集合具體包括：

根據用戶主動配置的主數據標簽將第一數據接口所對應的數據源作為主數據源；

對沒有配置主數據標簽的其他第二數據接口配置從數據標簽，將第二數據接口所對應的數據源作為從數據源，獲取每個主數據源和從數據源分別所對應的數據主體；

依次遍歷每一個從數據源的數據主體，將具有相同數據主體的從數據源歸類為一個從數據集合。