[發明專利]一種網絡流量采集方法

有效

• 申請號: 202210043683.3
• 申請日: 2022-01-14
• 公開（公告）號: CN114598493B
• 公開（公告）日: 2023-09-05
• 發明（設計）人: 章建聰;王思;朱玲華;董平;董恩澤;鞏勛
• 申請（專利權）人: 浙江省通信產業服務有限公司
• 主分類號: H04L9/40
• 分類號: H04L9/40;H04L67/06;H04L69/22;H04L67/02;H04L43/08;H04L47/2483
• 代理公司: 杭州杭誠專利事務所有限公司 33109
• 代理人: 李博

1.一種網絡流量采集方法，其特征在于，包括以下步驟：

S1：在提供網絡流量的服務器上抓取網絡流量，以文件的形式保存為流量文件；

S2：將流量文件發送到數據安全監控平臺所在服務器的指定目錄下；

S3：在數據安全監控平臺上，讀取配置文件，獲取流量文件的配置信息；配置信息包括流量文件所在目錄、目錄搜索層級、文件格式和文件排序方式；

S4：網絡流量采集的掃描模塊周期性地定時掃描指定目錄，篩選出指定文件格式的文件，將所有未處理文件按照指定文件排序方式進行排序；

S5：網絡流量采集的處理模塊按照文件的排序順序，依次讀取文件信息、解析文件、獲取網絡報文包；

S6：網絡協議解析程序解析網絡流量，輸出格式化數據，存入數據庫；

S7：數據分析模塊將格式化數據經過算法轉換，輸出分析結果，存入數據庫，供web前端展示使用；

步驟S4中，前后兩次間隔額定時間掃描文件，根據文件大小是否發生變化判斷文件是否傳輸完成；

所述的間隔的額定時間大于或等于發送端發送超時時間；

步驟S4中，將位于指定目錄及指定目錄搜索層級下的除已處理文件及非目標格式文件以外的所有文件掃描出來，再按照指定排序方式進行排序；

步驟S5中每處理完一個文件后，在對應目錄下生成相同文件名稱加后綴“.tmp”的空文件；

步驟S4中每掃描到一個文件，判斷是否存在同名帶后綴“.tmp”的文件，若存在，則過濾該文件；

步驟S4到步驟S5中，采用單網絡流量采集的掃描模塊，多網絡流量采集的處理模塊的應用場景；

掃描模塊往dpdk的無鎖隊列rte_ring中放入文件信息的地址，處理模塊從dpdk的無鎖隊列rte_ring中取出文件信息地址，從對應地址獲取文件信息，進行文件解析工作。

2.根據權利要求1所述的一種網絡流量采集方法，其特征在于，在發送文件成功或采集文件成功后，增加刪除文件配置項開關，判斷是否需要刪除文件。

3.根據權利要求1所述的一種網絡流量采集方法，其特征在于，根據文件格式的特征進行網絡報文包的讀取；若文件符合對應的文件格式特征，則循環讀取，獲取網絡報文及其基本信息；否則記錄為異常包。