[發(fā)明專利]大流量數據流的檢測方法以及檢測裝置

有效

• 申請?zhí)枺?/td>: 202010225423.9
• 申請日: 2020-03-26
• 公開（公告）號: CN113452657B
• 公開（公告）日: 2023-03-28
• 發(fā)明（設計）人: 張喜;潘璐伽;唐璐;李柏晴
• 申請（專利權）人: 華為技術有限公司
• 主分類號: H04L9/40
• 分類號: H04L9/40;H04L47/215;H04L43/08
• 代理公司: 北京龍雙利達知識產權代理有限公司 11329
• 代理人: 王龍華;王君

本申請公開了一種大流量數據流的檢測方法以及檢測裝置，該檢測方法包括：控制設備獲取多個數據采集設備中的二維數據結構，該二維數據結構用于存儲相應的數據采集設備獲取的網絡中的數據流的信息；該控制設備對該多個數據采集設備中的二維數據結構進行合并處理，得到合并處理后的二維數據結構；該控制設備根據該合并處理后的二維數據結構檢測大流量數據流，該大流量數據流是指該網絡中全網級別的大流量數據流?；诒旧暾埖募夹g方案，能夠檢測出全網級別的大流量數據流，從而提高大流量數據檢測的準確性。

技術領域

本申請涉及信息技術領域，更具體地，涉及大流量數據流的檢測方法以及檢測裝置。

背景技術

隨著移動網絡的快速發(fā)展，網絡中的流量呈現爆破式增長，從而導致網絡中的異常頻發(fā)；進一步帶來了網絡維護成本的增加。如何快速、無遺漏檢測出網絡中的異常流量變的尤為重要。

在網絡異常流量檢測中，有兩種類型的異常流量尤為值得關注。一種是流量的大小巨大的數據流，也稱為大流量對象(heavy hitter)；另一種是在一定時間內流量大小變化很大的數據流，也稱為大變化對象(heavy changer)；兩種數據流統(tǒng)稱為大流量數據流(heavy flow)。

目前，大流量數據流檢測大多是通過在網絡中的某個數據采集設備中部署多個二維表，通過二維表存儲該數據采集設備獲取的所有數據流的信息，進而對單個數據采集設備進行異常數據流的檢測。但是，網絡中的數據流可能會分布在多個數據采集設備，只通過單個數據采集設備進行異常數據流的檢測可能會遺漏某些大流量數據流，比如，通過單個數據采集設備的檢測發(fā)現的數據流可能很小，但是許多個數據采集設備中的數據流合并起來可能會是全網級別的大流量數據流；因此，如何針對全網級別的大流量數據流進行檢測成為一個亟需解決的問題。

發(fā)明內容

本申請?zhí)峁┮环N大流量數據流的檢測方法以及檢測裝置，能夠檢測出全網級別的大流量數據流，從而提高大流量數據流檢測的準確性。

第一方面，提供了一種大流量數據流的檢測方法，包括：控制設備獲取多個數據采集設備中的二維數據結構，其中，所述二維數據結構用于存儲相應的數據采集設備獲取的網絡中的數據流的信息；所述控制設備對所述多個數據采集設備中的二維數據結構進行合并處理，得到合并處理后的二維數據結構；所述控制設備根據所述合并處理后的二維數據結構檢測大流量數據流，其中，所述大流量數據流是指所述網絡中全網級別的大流量數據流。

其中，上述多個數據采集設備中的二維數據結構中的任意一個二維數據結構可以用于存儲多個數據采集設備中一個數據采集設備獲取的網絡的數據流的信息；比如，數據流的信息可以包括獲取的網絡中的數據流的鍵值、數據流的大小等信息。

需要說明的是，多個數據采集設備中任意一個數據采集設備中的二維數據結構用于存儲該數據采集設備獲取的網絡中的數據流的信息，即數據采集設備中的二維數據結構可以用于檢測單點設備級別的大流量數據流，即流經單個數據采集設備的大流量數據流；而合并處理得到的合并處理后的二維數據結構可以用于檢測網絡中全網級別的大流量數據流，即通過數據采集設備的檢測可能并非大流量數據流，但是許多個數據采集設備中的某一數據流合并起來檢測為大流量數據流，則該大流量數據流為全網級別的大流量數據流。

其中，大流量數據流是大流量對象(heavy hitter)與大變化對象(heavychanger)的數據流的總稱，其中，大流量對象是指網絡數據流在以包數量、字節(jié)數或者連接數等為單位的數值超過預期，即超過一定的閾值的數據流；大變化對象是指網絡數據流在一個較短的時間段內，在以包數量、字節(jié)數或者連接數等為單位的數值大小產生了非常劇烈的變化的數據流。

應理解，上述各個數據采集設備上的二維數據結構可以用來記錄數據采集設備即單點設備獲取的數據流的信息；但是，對于全網級別的數據流，即流經多個單點設備的數據流無法進行檢測；在本申請的實施例中，通過對多個數據采集設備中的數據結構進行合并處理得到的合并后的數據結構可以用于檢測全網級別的數據流，從而避免對于全網級別的大流量數據流的漏檢的問題。