[發(fā)明專利]控制平面的網(wǎng)絡(luò)狀態(tài)的確定方法、裝置及計算機設(shè)備

在審

• 申請?zhí)枺?/td>: 202310093616.7
• 申請日: 2023-02-09
• 公開（公告）號: CN116389240A
• 公開（公告）日: 2023-07-04
• 發(fā)明（設(shè)計）人: 朱靜;陶高峰;邢凱;孫仕康;陳力;侯曉暉;黃超;王丹;孫羽;夏丹丹;羅永璨
• 申請（專利權(quán)）人: 網(wǎng)絡(luò)通信與安全紫金山實驗室
• 主分類號: H04L41/0803
• 分類號: H04L41/0803;H04L41/0894;H04L9/40;H04L41/14;H04L41/0895
• 代理公司: 北京康信知識產(chǎn)權(quán)代理有限責(zé)任公司 11240
• 代理人: 董文倩

本發(fā)明公開了一種控制平面的網(wǎng)絡(luò)狀態(tài)的確定方法、裝置及計算機設(shè)備。該方法包括：基于第一更新策略和第二更新策略確定控制平面的初始網(wǎng)絡(luò)狀態(tài)下的貝葉斯納什均衡，其中，第一更新策略用于對初始網(wǎng)絡(luò)狀態(tài)進行更新，以降低更新后得到的網(wǎng)絡(luò)被攻擊后的影響，第二更新策略用于對初始網(wǎng)絡(luò)狀態(tài)進行更新，以增加更新后得到的網(wǎng)絡(luò)被攻擊后的影響；根據(jù)貝葉斯納什均衡調(diào)整網(wǎng)絡(luò)狀態(tài)，并確定第一更新策略對應(yīng)的第一累積收益；循環(huán)執(zhí)行在調(diào)整后的網(wǎng)絡(luò)狀態(tài)下的貝葉斯納什均衡，直到第一更新策略對應(yīng)的第一累積收益滿足預(yù)定的收斂條件，得到控制平面的目標(biāo)網(wǎng)絡(luò)狀態(tài)。解決了相關(guān)技術(shù)中，存在確定出的控制平面的網(wǎng)絡(luò)狀態(tài)不可靠的技術(shù)問題。

技術(shù)領(lǐng)域

本發(fā)明涉及通信領(lǐng)域，具體而言，涉及一種控制平面的網(wǎng)絡(luò)狀態(tài)的確定方法、裝置及計算機設(shè)備。

背景技術(shù)

在SDN(Software?Defined?Network，軟件定義網(wǎng)絡(luò))和SD-WAN(Software?DefinedWide?Area?Network，軟件定義廣域網(wǎng))部署中，控制平面的可靠性直接影響底層物理網(wǎng)絡(luò)上承載的數(shù)據(jù)的安全性。

在相關(guān)技術(shù)中，在對控制平面的網(wǎng)絡(luò)狀態(tài)進行設(shè)置時，一般是在考慮整個網(wǎng)絡(luò)的一般攻擊風(fēng)險來設(shè)計的。但采用這種設(shè)置方式得到的控制平面的網(wǎng)絡(luò)，已經(jīng)基于一定的數(shù)據(jù)驗證不太可靠。即，在相關(guān)技術(shù)中，存在確定出的控制平面的網(wǎng)絡(luò)狀態(tài)不可靠的問題。

針對上述的問題，目前尚未提出有效的解決方案。

發(fā)明內(nèi)容

本發(fā)明實施例提供了一種控制平面的網(wǎng)絡(luò)狀態(tài)的確定方法、裝置及計算機設(shè)備，以至少解決在相關(guān)技術(shù)中，存在確定出的控制平面的網(wǎng)絡(luò)狀態(tài)不可靠的技術(shù)問題。

根據(jù)本發(fā)明實施例的一個方面，提供了一種控制平面的網(wǎng)絡(luò)狀態(tài)的確定方法，包括：基于第一更新策略和第二更新策略確定控制平面的初始網(wǎng)絡(luò)狀態(tài)下的貝葉斯納什均衡，其中，所述第一更新策略用于對所述初始網(wǎng)絡(luò)狀態(tài)進行更新，以降低更新后得到的網(wǎng)絡(luò)被攻擊后的影響，所述第二更新策略用于對所述初始網(wǎng)絡(luò)狀態(tài)進行更新，以增加更新后得到的網(wǎng)絡(luò)被攻擊后的影響；根據(jù)所述貝葉斯納什均衡調(diào)整網(wǎng)絡(luò)狀態(tài)，并確定所述第一更新策略對應(yīng)的第一累積收益；循環(huán)執(zhí)行在調(diào)整后的網(wǎng)絡(luò)狀態(tài)下的貝葉斯納什均衡，直到所述第一更新策略對應(yīng)的第一累積收益滿足預(yù)定的收斂條件，得到所述控制平面的目標(biāo)網(wǎng)絡(luò)狀態(tài)。

可選地，所述方法還包括：確定所述控制平面所包括的多個節(jié)點，以及所述多個節(jié)點間的承載控制信令的控制鏈路，其中，所述多個節(jié)點包括：控制器和交換機設(shè)備；獲取所述多個節(jié)點的節(jié)點狀態(tài)信息，以及所述控制鏈路的鏈路狀態(tài)信息；基于所述節(jié)點狀態(tài)信息和所述鏈路狀態(tài)信息，確定所述控制平面的所述初始網(wǎng)絡(luò)狀態(tài)。

可選地，所述第一更新策略包括第一更新動作，所述第二更新策略包括：第二更新動作和更新類型。

可選地，所述方法還包括：確定所述第二更新策略對應(yīng)的第二累積收益，其中，所述第二累積收益用于確定在調(diào)整后的網(wǎng)絡(luò)狀態(tài)下的貝葉斯納什均衡中所述第二更新策略中的第二更新動作和更新類型。

可選地，所述方法還包括：基于預(yù)定的貪心算法，選擇所述第一更新策略對應(yīng)的所述第一更新動作。

可選地，所述基于第一更新策略和第二更新策略確定所述初始網(wǎng)絡(luò)狀態(tài)下的貝葉斯納什均衡，包括：采用免模型的強化學(xué)習(xí)方法，基于第一更新策略和第二更新策略確定在所述初始網(wǎng)絡(luò)狀態(tài)下的貝葉斯納什均衡。

可選地，所述免模型的強化學(xué)習(xí)方法包括：Q學(xué)習(xí)方法。