[發明專利]工業互聯網數據處理系統及方法

有效

• 申請號: 202011600683.6
• 申請日: 2020-12-29
• 公開（公告）號: CN112671922B
• 公開（公告）日: 2022-05-27
• 發明（設計）人: 孫亞東;王志海;王聞馨;喻波;魏力
• 申請（專利權）人: 北京明朝萬達科技股份有限公司
• 主分類號: H04L67/1001
• 分類號: H04L67/1001;H04L67/1095;H04L67/1097;H04L67/12;H04L43/12
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 楊愛平

1.一種工業互聯網數據處理系統，其特征在于，包括：

數據采集探針組件，用于獲取包括工業互聯網對應的網絡流量數據和日志數據的數據集合并緩存，根據獲取的網絡負載狀態和/或本地數據存儲狀態，將所述數據集合發送；

數據存儲裝置，用于接收所述數據采集探針組件發送的所述數據集合，將所述數據集合存儲，基于預設數據標準對已存儲的所述數據集合中的數據進行整合，生成標準化數據源；

數據傳輸總線，用于在接收到上層應用發送的數據請求的情況下，基于庫直連同步、數據文件同步或者接口服務同步，在所述數據存儲裝置的標準化數據源中獲取所述數據請求對應的目標數據并傳輸至所述上層應用；

所述數據采集探針組件包括流量采集探針組件，以及終端采集探針組件、數據庫采集探針組件和應用采集探針組件中的至少一類；所述流量采集探針組件包括一第一流量采集探針；

所述第一流量采集探針用于：確定主鏈路網絡負載，獲取對應的第一本地網絡流量數據存儲狀態和第一本地網絡負載，在所述第一本地網絡流量數據存儲狀態滿足第一預設條件，和/或，所述主鏈路網絡負載小于主鏈路負載閾值且所述第一本地網絡負載小于對應的本地網絡負載閾值時，將所述第一流量采集探針緩存的網絡流量數據發送至所述數據存儲裝置；

其中，所述第一流量采集探針對應于第一流量存儲空間，在所述第一流量采集探針緩存的網絡流量數據在所述第一流量存儲空間中的占比大于第一閾值時，確定所述第一本地網絡流量數據存儲狀態滿足所述第一預設條件。

2.根據權利要求1所述的工業互聯網數據處理系統，其特征在于，

所述流量采集探針組件，用于采集所述工業互聯網對應的網絡流量數據并緩存；

所述終端采集探針組件，用于采集所述工業互聯網對應的終端日志數據并緩存；

所述數據庫采集探針組件，用于采集所述工業互聯網對應的數據庫日志數據并緩存；

所述應用采集探針組件，用于采集所述工業互聯網對應的應用日志數據并緩存；

其中，所述工業互聯網對應的日志數據包括所述終端日志數據、所述數據庫日志數據和所述應用日志數據中的至少一類數據。

3.根據權利要求2所述的工業互聯網數據處理系統，其特征在于，

所述第一流量采集探針還用于在所述主鏈路網絡負載小于所述主鏈路負載閾值時，向所述終端采集探針組件、所述數據庫采集探針組件和所述應用采集探針組件中的至少一類發送主鏈路網絡處于空閑狀態的第一通知信息；

其中，所述第一流量采集探針對應于一第一流量采集服務器。

4.根據權利要求3所述的工業互聯網數據處理系統，其特征在于，所述流量采集探針組件還包括至少一個第二流量采集探針，每個所述第二流量采集探針對應于一第二流量采集服務器；

針對每個所述第二流量采集探針，所述第二流量采集探針用于：接收所述第一流量采集探針發送的所述第一通知信息，獲取對應的第二本地網絡流量數據存儲狀態和第二本地網絡負載，在所述第二本地網絡流量數據存儲狀態滿足第一預設條件，和/或，接收到所述第一通知信息且所述第二本地網絡負載小于對應的本地網絡負載閾值時，將所述第二流量采集探針緩存的網絡流量數據發送至所述數據存儲裝置；

其中，每個所述第二流量采集探針對應于一第二流量存儲空間，在當前第二流量采集探針緩存的網絡流量數據在對應的第二流量存儲空間中的占比大于第一閾值時，確定當前第二流量采集探針對應的第二本地網絡流量數據存儲狀態滿足所述第一預設條件。

5.根據權利要求3所述的工業互聯網數據處理系統，其特征在于，所述終端采集探針組件包括至少一個終端采集探針；

針對每個所述終端采集探針，所述終端采集探針用于：獲取對應的本地終端日志數據存儲狀態以及本地終端網絡負載，在對應的本地終端日志數據存儲狀態滿足第二預設條件，和/或，在接收到所述第一通知信息且對應的本地終端網絡負載小于對應的第一網絡負載閾值時，將所述終端采集探針緩存的終端日志數據發送至所述數據存儲裝置；

其中，每個所述終端采集探針對應于一辦公終端或者一工業終端，每個所述終端采集探針對應于一終端日志存儲空間，在當前終端采集探針緩存的終端日志數據在對應的終端日志存儲空間中的占比大于第二閾值時，確定當前終端采集探針對應的本地終端日志數據存儲狀態滿足所述第二預設條件。