[發明專利]邊緣采集基于遠程過程調用框架的數據傳輸系統及方法

在審

• 申請號: 202211191511.7
• 申請日: 2022-09-28
• 公開（公告）號: CN115766680A
• 公開（公告）日: 2023-03-07
• 發明（設計）人: 王小光;吉云;吳菲;吳長東
• 申請（專利權）人: 國能信控互聯技術有限公司
• 主分類號: H04L67/00
• 分類號: H04L67/00;H04L67/133;H04L67/51;H04L9/40
• 代理公司: 北京智繪未來專利代理事務所(普通合伙) 11689
• 代理人: 肖繼軍

一種邊緣采集基于遠程過程調用框架的數據傳輸系統及方法，首先，采集服務模塊采集測點數據并發送到客戶端；然后，采集服務模塊利用遠程過程調用框架將測點數據發送到實時服務模塊；接著，實時服務模塊讀取和解析處理并利用遠程過程調用框架將測點數據發送到歷史服務模塊；最后歷史服務模塊對測點數據進行數據清洗處理并保存在實時數據庫系統。本發明利用遠程過程調用框架和序列化實現測點數據多通道傳輸，同時配置壓縮與加密算法，增強了海量數據在服務間級聯傳輸的穩定性和安全性。

技術領域

本發明屬于電網數據領域，具體涉及邊緣采集基于遠程過程調用框架的數據傳輸系統及方法。

背景技術

數據作為各個行業業務發展的核心資產，已成為企業進行科學決策、市場預判、調度協同、智能生產、價值創造的源動力，隨之而來的首先就是邊緣側海量數據的有效整合和管控手段問題。近年來隨著業務應用場景的增加、準確、高效的數據成為信息化項目建設的掣肘，對邊緣側的數據采集也提出了更高的要求。特別是在多種數據庫和數據采集協議被同時應用時，對數據采集之數據穩定傳輸技術是目前面臨的重要問題，數據的高效、穩定、安全傳輸問題成為數據采集系統的關鍵技術，本研究集中以邊緣采集各關鍵模塊服務之間數據傳輸為應用場景為目標進行的。

針對數據傳輸技術的研究也有很多，但大部分數據傳輸研究大多聚焦于傳統Socket及相應的第三方序列化技術展開，在傳輸穩定性、高性能、集成壓縮與加密技術存在一定的不足，例如，現有技術缺乏對連續性海量數據測點的傳輸支持，

現有技術在數據傳輸過程缺乏對數據量流的壓縮與加密環節，不能有效提升數據網絡利用效率及數據傳輸安全性。

發明內容

為解決現有技術中存在的不足，本發明提供一種邊緣采集基于遠程過程調用框架的數據傳輸系統及方法。

本發明采用如下的技術方案：

本發明一方面提供了一種邊緣采集基于遠程過程調用框架的數據傳輸系統，包括預設調用框架模塊，用于根據客戶端與服務端的接口協議，預設遠程過程調用框架，其中，遠程過程調用框架包括各類接口文件，客戶端與服務端之間的數據傳輸通過遠程過程調用框架實現，

采集服務模塊，對測點數據進行序列化處理并調用客戶端利用遠程過程調用框架向服務端發送；

實時服務模塊，調用服務端接受第一序列化數據并反序列化處理，得到還原數據，以及對還原數據進行序列化處理并調用客戶端利用遠程過程調用框架向服務端發送；

歷史服務模塊，調用服務端接受第二序列化數據并反序列化處理，得到測點數據并進行數據清洗。

優先地，還包括本地數據對象隊列，供遠程過程調用框架服務端使用，用于實時服務及歷史服務將接收數據對象進行緩存的隊列數據結構；

優先地，還包括實時數據庫系統，與歷史服務模塊通訊連接，用于存儲測點數據的數據庫系統。

優先地，客戶端與服務端之間的數據傳輸設置有多個數據傳輸通道。

另一方面提供了一種邊緣采集基于遠程過程調用框架的數據傳輸方法，包括以下步驟：

根據客戶端與服務端的接口協議，預設遠程過程調用框架，

其中，所述遠程過程調用框架包括各類接口文件，每個接口文件內分別配置有遠程過程調用對象，

采集服務模塊調用客戶端對測點數據進行序列化處理，并進行壓縮與加密，得到第一序列化數據，同時設置客戶端參數以及數據傳輸通道的連接線程數量，調用客戶端利用遠程過程調用框架向服務端發送；

服務端接受第一序列化數據并對其進行反序列化處理、解壓縮處理和解密處理，得到還原數據，同時服務端將還原數據插入本地數據對象隊列，得到數據傳送隊列，發送到實時服務模塊；