[發明專利]一種網關接入方法、裝置、計算機設備和存儲介質

在審

• 申請號: 202010885783.1
• 申請日: 2020-08-28
• 公開（公告）號: CN111935752A
• 公開（公告）日: 2020-11-13
• 發明（設計）人: 王鈺翔;祝美祺
• 申請（專利權）人: 廣州市百果園信息技術有限公司
• 主分類號: H04W24/02
• 分類號: H04W24/02;H04W24/06;H04W48/20;H04W88/16
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

1.一種網關接入方法，其特征在于，應用于網關管理器，所述方法包括：

確定在當前網關的運行狀態下，將客戶端分配至所述網關的分配策略，所述分配策略用于優化所述客戶端通過所述網關與業務服務器之間的通信狀態；

確定當前客戶端首次接入的網關、作為原始網關；

按照所述分配策略查找適于接入當前所述客戶端的網關、作為目標網關；

將當前所述客戶端從所述原始網關切換至所述目標網關，以使當前所述客戶端通過所述目標網關與所述業務服務器進行通信。

2.根據權利要求1所述的方法，其特征在于，所述確定在當前網關的運行狀態下，將客戶端分配至所述網關的分配策略，包括：

生成強化學習模型，在所述強化學習模型中，所述網關管理器為智能體、所述網關的運行狀態為環境的狀態、為客戶端分配所述網關為動作，所述客戶端通過所述網關與業務服務器之間的通信狀態為激勵；

執行所述強化學習模型，在所述運行狀態的條件下、由所述網關管理器學習為所述客戶端分配所述網關的分配策略，以優化所述通信狀態。

3.根據權利要求2所述的方法，其特征在于，所述執行所述強化學習模型，在所述運行狀態的條件下、由所述網關管理器學習為所述客戶端分配所述網關的分配策略，以優化所述通信狀態，包括：

從所述運行狀態中提取運行特征；

將所述運行特征輸入預置的Q網絡中進行處理，以輸出在所述網絡狀態下執行所有分配策略的Q值，所述分配策略表示為所述客戶端分配所述網關；

按照所述Q值選擇與所述運行狀態適配的分配策略，以優化所述通信狀態。

4.根據權利要求3所述的方法，其特征在于，所述執行所述強化學習模型，在所述運行狀態的條件下、由所述網關管理器學習為所述客戶端分配所述網關的分配策略，以優化所述通信狀態，還包括：

在應用所述分配策略為所述客戶端分配所述網關之后，查詢所述網關新的運行狀態、所述客戶端通過所述網關與所述業務服務器之間的通信狀態；

基于新的所述運行狀態、所述通信狀態更新所述Q值；

基于更新之后的所述Q值訓練所述Q網絡。

5.根據權利要求3或4所述的方法，其特征在于，所述Q網絡包括如下的至少一種：

卷積神經網絡、循環神經網絡、深度神經網絡。

6.根據權利要求1-4任一項所述的方法，其特征在于，所述確定當前客戶端首次接入的網關、作為原始網關，包括：

接收網關接入當前客戶端時發送的分配請求，所述分配請求觸發于當前所述客戶端接入時攜帶的、表示首次接入的標識；

響應于所述分配請求，確定所述網關為原始網關。

7.根據權利要求1-4任一項所述的方法，其特征在于，所述按照所述分配策略查找適于接入當前所述客戶端的網關、作為目標網關，包括：

查詢當前所述客戶端符合的條件；

在所述分配策略中查找為所述條件分配的網關，作為適于接入當前所述客戶端的目標網關。

8.根據權利要求1-4任一項所述的方法，其特征在于，所述將當前所述客戶端從所述原始網關切換至所述目標網關，以使當前所述客戶端通過所述目標網關與所述業務服務器進行通信，包括：

將所述目標網關通知所述原始網關，所述原始網關用于通知當前所述客戶端斷開與所述原始網關的連接，以及，接入所述目標網關，當前所述客戶端接入所述目標網關時未攜帶表示首次接入的標識。

9.根據權利要求1-4任一項所述的方法，其特征在于，

所述運行狀態包括如下的至少一種：

處理器的占用率、內存的占用率、帶寬的占用率、所述網關上各客戶端的網絡延遲；

所述通信狀態包括所有所述客戶端通過所述網關訪問所有業務服務器的整體延遲。