[發明專利]一種以大數據流式技術實現網絡數據包的分析方法及系統

有效

• 申請號: 201910985537.0
• 申請日: 2019-10-17
• 公開（公告）號: CN110650212B
• 公開（公告）日: 2020-12-08
• 發明（設計）人: 陳鵬;王樹志;張磊;袁思靜
• 申請（專利權）人: 國科元科技（北京）有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08;H04L12/24
• 代理公司: 北京和信華成知識產權代理事務所(普通合伙) 11390
• 代理人: 胡劍輝

1.一種以大數據流式技術實現網絡數據包的分析方法，其特征在于，包括如下步驟：

步驟100、接收連接開始和連接結束之間的數據，劃分數據包的屬性信息，按照時間順序將數據包先后排序；

步驟200、選擇數據包的屬性，根據不同的屬性組合形式篩選數據流，關聯數據包屬性的映射關系, 統計兩個以上相關屬性之間的對應關系；

步驟300、根據數據包屬性的映射信息，篩選出映射信息相同屬性不同的數據流，關聯計算兩個以上相關屬性之間的對應關系；

在步驟300中，先確定一個目的端口地址追蹤的用戶基本信息，根據當前目的端口地址映射的瀏覽項關鍵信息，關聯瀏覽項關鍵信息相同的目的端口地址；

再根據關聯的目的端口地址篩選數據流，追蹤篩選出的目的端口地址映射的用戶基本信息；

最后，整體統計具有相同瀏覽項關鍵信息的目的端口地址對應的源IP地址，分析同一類瀏覽項關鍵信息對應的用戶基本信息。

2.根據權利要求1所述的一種以大數據流式技術實現網絡數據包的分析方法，其特征在于：在步驟100中，數據包的屬性信息包括數據響應時間、源IP地址、目的端口地址、傳輸類型和關注時長。

3.根據權利要求2所述的一種以大數據流式技術實現網絡數據包的分析方法，其特征在于：所述源IP地址和目的端口地址分別鏈接有映射關系，追蹤所述源IP地址映射到用戶基本信息，追蹤所述目的端口地址映射到瀏覽項關鍵信息。

4.根據權利要求3所述的一種以大數據流式技術實現網絡數據包的分析方法，其特征在于：所述用戶基本信息主要包括用戶姓名、性別、年齡、電話號碼和生活所在區域，所述瀏覽項關鍵信息主要包括小區所在位置、面積大小、裝修情況以及有無學區。

5.根據權利要求3所述的一種以大數據流式技術實現網絡數據包的分析方法，其特征在于，在步驟200中，根據數據包的屬性信息組合，分別獲取每一個目的端口地址匹配的源IP地址，統計目的端口地址的源IP地址數量，以及源IP地址映射的用戶基本信息，從而分析目的端口地址的受眾用戶，篩選目的端口地址對應源IP地址信息的具體步驟為：

獲取一個目的端口地址相同的數據包，從所有數據包內篩選出同一目的端口地址的數據流；

統計同一目的端口地址數據包中的源IP地址，追蹤源IP地址映射的用戶基本信息；

統計用戶基本信息的年齡分布和性別占比情況，分析每一個瀏覽項關鍵信息匹配的受眾用戶信息。

6.根據權利要求5所述的一種以大數據流式技術實現網絡數據包的分析方法，其特征在于，在步驟200中，根據數據包的屬性信息組合，分別獲取每一個用戶基本信息匹配的瀏覽項關鍵信息，統計源IP地址對應的目的端口地址數量，以及源IP地址匹配的目的端口地址關注時長，分析每一個用戶的喜好的步驟具體為：

隨機挑選一個源IP地址，獲取同一源IP地址數據流中的目的端口地址；

統計同一目的端口地址出現的次數，確定用戶對每一條信息的瀏覽次數，按照次數大小對目的端口地址排序；

計算每一個目的端口地址瀏覽關注總時長，按照總時長大小對目的端口地址排序；

累加目的端口地址瀏覽次數和瀏覽關注總時長參數，按照從大到小的順序重新對同一源IP地址瀏覽的不同目的端口地址關注度排序；

統計每個目的端口地址對應的瀏覽項關鍵信息，分析用戶對應的喜好。

7.根據權利要求6所述的一種以大數據流式技術實現網絡數據包的分析方法，其特征在于：在步驟300中，確定一個源IP地址追蹤的瀏覽項關鍵信息后，根據當前源IP地址映射的用戶基本信息，關聯用戶基本信息相同的源IP地址；

再根據關聯的用戶基本信息的源IP地址篩選數據流，追蹤篩選出的目的端口地址映射的瀏覽項關鍵信息；

最后，整體統計具有相同用戶基本信息的源IP地址對應的瀏覽項關鍵信息，分析同一類用戶基本信息對應的瀏覽項關鍵信息。

8.一種以大數據流式技術實現網絡數據包的分析系統，其特征在于，包括：

源IP映射模塊（1），用于追蹤每個源IP地址對應的用戶信息；

目的IP映射模塊（2），用于追蹤每個目的端口地址對應的關鍵信息；

屬性篩選單元（3），用于根據源IP地址或者目的端口地址，確定每個信息的受眾用戶，以及每個用戶的喜好信息；

源IP信息關聯模塊（4），用于根據源IP地址的映射信息，關聯映射信息相同的用戶，統計該用戶的瀏覽記錄，計算信息相同的用戶瀏覽的喜好順序；

目的IP信息關聯模塊（5），用于根據目的端口地址的映射信息，關聯映射信息相同的目的端口地址，統計該目的端口地址對應的源IP地址的映射信息，分析關鍵信息相同的瀏覽項對應的受眾用戶。