[發明專利]一種流量傳輸策略的確定方法及裝置

有效

• 申請號: 202010634677.6
• 申請日: 2020-07-02
• 公開（公告）號: CN111917657B
• 公開（公告）日: 2022-05-27
• 發明（設計）人: 王穎;安恒彬;邢寧哲;紀雨彤;金燊;劉川;劉世棟;馬睿;歐清海;郭少勇
• 申請（專利權）人: 北京郵電大學;國網冀北電力有限公司信息通信分公司;國家電網有限公司;全球能源互聯網研究院有限公司;國家電網有限公司信息通信分公司;國網信息通信產業集團有限公司
• 主分類號: H04L47/10
• 分類號: H04L47/10;H04L47/125;G06K9/62
• 代理公司: 北京柏杉松知識產權代理事務所(普通合伙) 11413
• 代理人: 馬敬;項京

本發明實施例提供了一種流量傳輸策略的確定方法及裝置，該方法包括：獲取軟件定義網絡中所有節點對的第一通信狀態，節點對包括通信連接的兩個節點，節點對包括的兩個節點之間存在至少一條傳輸路徑；將所有節點對的第一通信狀態輸入預設學習模型，得到每一節點對的控制動作，控制動作包括節點對對應的每條傳輸路徑的負載比例，預設學習模型為基于預設訓練集對深度強化學習網絡進行訓練得到的模型；基于每一節點對的控制動作，生成該節點對對應的流量傳輸策略。通過上述方法提高了流量傳輸調整效率，并且提高了流量傳輸策略的確定方式的延展性和準確率。

技術領域

本發明涉及通信技術領域，特別是涉及一種流量傳輸策略的確定方法及裝置。

背景技術

隨著計算機網絡的快速發展，網絡業務日益多樣化，流量呈爆炸性增長。為了提高整個網絡中流量的傳輸效率，需要實時調整各個通信設備中的流量傳輸策略，以使通信設備基于調整后的流量傳輸策略傳輸流量，進而使整個網絡中流量的傳輸效率達到最優。

目前，常見的流量傳輸策略的確定方式有以下幾種。

第一種，網絡管理員手動在不同的通信設備上配置相應的流量傳輸策略。當需要修改流量傳輸策略時，網絡管理員再手動地修改通信設備上的流量傳輸策略。采用這種流量傳輸策略的確定方式來實現調整通信設備傳輸的流量，其效率較低，且人工成本較高。

第二種，在通信設備中配置Q-learning(狀態動作學習)算法，通過Q-learning算法，可實現根據網絡流量負載的變化，自適應地調整通信設備中的流量傳輸策略。采用這種流量傳輸策略的確定方式來實現調整通信設備傳輸的流量，可以提高流量傳輸調整效率，降低人工成本。但是，當有新的通信設備加入網絡中時，需要在新加入的通信設備上配置Q-learning算法，使得上述流量傳輸策略的確定方式的延展性較差。

第三種，在通信設備中配置一種基于深度強化學習的路由優化算法，該算法可以學習不同的流量傳輸策略，從而可實現根據網絡流量負載的變化，通過該算法自適應地調整通信設備中的流量傳輸策略。采用這種流量傳輸策略的確定方式來實現調整通信設備傳輸的流量，可以提高流量傳輸調整效率，降低人工成本。但這種流量傳輸策略的確定方式所依賴的算法，在學習流量傳輸策略時沒有考慮到多個通信設備的狀態之間的聯系，使得學習到的流量傳輸策略的準確率較低，進而使這種流量傳輸策略的確定方式的準確率較低。

第四種，采用SDN(Software Defined Network，軟件定義網絡)來確定流量傳輸策略。網絡管理員可以在SDN控制器上層的控制應用中定義流量傳輸策略，然后通過網絡接口將流量傳輸策略傳送給SDN控制器。SDN控制器接收到網絡流量傳輸策略后，通過南向協議(如Openflow)將流量傳輸策略發送給與SDN控制器連接的通信設備(如交換機)中，使得通信設備根據流量傳輸策略調整通信設備傳輸的流量。通過上述方法，當網絡管理員需要更新流量傳輸策略時，網絡管理員只需要在控制應用中定義新的流量傳輸策略，無需在每個通信設備中逐一配置新的網絡流量傳輸策略，降低了人工成本。但每當網絡中流量的負載發生改變時，網絡管理員都需要在控制應用中相應地修改流量傳輸策略，SDN無法自身根據網絡中的流量負載修改流量傳輸策略，使得流量傳輸調整的效率較低。

發明內容

本發明實施例的目的在于提供一種流量傳輸策略的確定方法與裝置，以提高流量傳輸調整效率，并且提高流量傳輸策略的確定方式的延展性和準確率。具體技術方案如下：

為達到上述目的，本發明實施例提供了一種流量傳輸策略的確定方法，應用于軟件定義網絡的控制器，所述方法包括：

獲取所述軟件定義網絡中所有節點對的第一通信狀態，所述節點對包括通信連接的兩個節點，所述節點對包括的兩個節點之間存在至少一條傳輸路徑；