[發明專利]用于網絡流量監控的方法和系統

有效

• 申請號: 201110241618.3
• 申請日: 2011-08-22
• 公開（公告）號: CN102957571A
• 公開（公告）日: 2013-03-06
• 發明（設計）人: 陳旭;宋璇;尹咸陽;張仁卓
• 申請（專利權）人: 華為技術有限公司
• 主分類號: H04L12/26
• 分類號: H04L12/26;H04L29/08
• 代理公司: 暫無信息
• 代理人: 暫無信息

技術領域

本發明涉及互聯網(Internet)領域，且更具體而言，涉及互聯網中數據流量的監控。

背景技術

隨著Internet的快速發展，互聯網成為信息傳播承載的主要途徑。然而，傳統互聯網缺乏監管，惡意/黃色/人身攻擊的信息泛濫，甚至已經出現恐怖組織利用互聯網培養恐怖分子、組織恐怖襲擊的案例。為了應對這種不良情態，采用技術手段對互聯網進行監管已成為各國政府和運營商的共識。流量監控系統在這樣的背景下應運而生。流量監控系統采集流量信息，還原原始信息，并根據原始信息中的特征進行智能分析，從而及時發現網絡中存在的漏洞，并力求對網絡攻擊做到防患于未然。

傳統的流量監控方法一般分為三個步驟：流量引流、協議重組及后臺內容分析。這三個步驟由對應的三種功能單元完成，如圖1所示，分別為引流分類單元102、協議重組單元104及后臺內容分析單元106。其中，引流分類單元102按照協議類型將收到的數據包分發給不同的協議重組單元104，協議重組單元104還原應用層信息(例如，從簡單郵件傳輸協議(SMTP)報文還原電子郵件(Email)信息、從超文本傳輸協議(HTTP)報文還原網頁的超文本標記語言(HTML)，然后，將還原的應用層信息連同時間標簽，鏈路信息等發送至后臺內容分析單元106進行分析。后臺內容分析單元106由服務器集群組成，對還原的應用層信息進行熱點統計、互聯網信息分析等，從而采取一定的措施抑制網絡攻擊。

但是，在上述現有技術中，引流分類單元被動引流，大流量的數據直接被導入到協議重組單元和后臺內容分析單元。隨著流量的增長，協議重組單元和后臺內容分析單元中的服務器集群的處理成本會大幅上升。

其次，后臺內容分析功能是在協議重組后完成的，從而對大量相同的內容進行重復重組，導致對協議重組單元的性能需求很大。

此外，上述傳統的流量監控方法由于只能獲得部分的對等網絡(Peer-To-Peer，英文簡稱為P2P)文件分片而無法實現智能鏈接其它的P2P文件分片，從而不能處理對等網絡的流量監控。

發明內容

有鑒于此，本發明的一方面提供一種用于網絡流量監控的方法，所述方法包括：在預定時間內對統一資源定位符URL(Uniform/Universal?ResourceLocator，URL)的被請求次數進行統計以確定熱點URL；主動抓取所述熱點URL對應的資源；對主動抓取的所述熱點URL對應的資源進行協議重組；及對經協議重組的數據進行內容分析。

本發明的一方面提供一種用于網絡流量監控的系統，所述系統包括：引流分類單元，用于對數據包進行引流分類；熱點統計單元，用于在預定時間內對統一資源定位符URL的被請求次數進行統計以確定熱點URL；主動抓取單元，用于主動抓取所述熱點URL對應的資源；協議重組單元，用于對主動抓取的所述熱點URL對應的資源進行協議重組；及后臺內容分析單元，用于對經協議重組后的數據進行內容分析。

本發明實施例的技術方案在預定時間內對統一資源定位符URL的被請求次數進行統計以確定熱點URL，然后主動抓取所述熱點URL對應的資源進行協議重組和內容分析。因此，可以減少協議重組和后臺內容分析的負擔。此外，本發明實施例的技術方案對于分布式P2P資源，可主動抓取分布在各處的P2P文件分片，以支持對P2P流量的監控。

附圖說明

圖1為現有技術中傳統的網絡流量監控系統的示意圖。

圖2為本發明實施例中網絡流量監控系統的一個實施例示意圖。

圖3為本發明實施例中網絡流量監控系統的另一個實施例示意圖。

圖4為本發明實施例中網絡流量監控方法的一個實施例示意圖。

結合附圖閱讀時將更好地了解以上發明內容以及以下本發明的某些實施例的詳細描述。出于說明本發明的目的，在圖中展示某些實施例。然而，應了解，本發明不限于附圖中所展示的布置和手段。

具體實施方式

下文結合附圖所闡述的詳細說明意在說明本發明的各種實施例，而非代表本發明僅可實施為這些實施例。詳細說明包括具體細節，以便達成對本發明的透徹了解。然而，所屬領域的技術人員應了解，本發明的實施也可以不使用這些具體細節。在某些實例中，以方塊圖的形式顯示各眾所周知的結構及組件，以免淡化對本發明的說明。