[發明專利]一種基于深度確定性策略的跳頻智能抗干擾決策方法

在審

• 申請號: 202211512206.3
• 申請日: 2022-11-29
• 公開（公告）號: CN116073856A
• 公開（公告）日: 2023-05-05
• 發明（設計）人: 張煜培;趙知勁
• 申請（專利權）人: 杭州電子科技大學
• 主分類號: H04B1/715
• 分類號: H04B1/715;H04B17/382;H04B17/391
• 代理公司: 杭州君度專利代理事務所(特殊普通合伙) 33240
• 代理人: 朱月芬

1.一種基于深度確定性策略的跳頻智能抗干擾決策方法，其特征在于包括以下步驟：

步驟1、建立雙變跳頻通信系統模型；

步驟2、建立雙變跳頻通信系統抗干擾決策模型；

步驟3、基于強化學習的優化問題轉換；

步驟4、基于HDP-DDPG的雙變跳頻通信系統抗干擾決策；

步驟5、訓練HDP-DDPG網絡，輸出抗干擾決策模型。

2.根據權利要求1所述的一種基于深度確定性策略的跳頻智能抗干擾決策方法，其特征在于步驟1所述的建立雙變跳頻通信系統模型，具體如下：

常規跳頻信號的數學模型表示為：

其中，f_c為最小跳頻頻率，ρ_l為根據偽隨機序列產生的頻率控制字，用來控制跳頻頻率的變化，f_l為最小跳頻頻率間隔，g(t)為長度T_c的脈沖函數，T_c為每一跳的駐留時間，T_c時間內，跳頻頻率根據ρ_l的值來確定；

“雙變”跳頻通信技術的主要特點是各跳頻頻率之間的間隔不再是f_l的整數倍，而是指定范圍內的任意值，即最小跳頻頻率間隔f_l用一個時變量f_c(ρ_l)來代替，其中ρ_l是偽隨機序列產生的頻率控制字；跳頻速率v不再是固定不變，而是在多個跳速等級上偽隨機非線性變化；相應地，每一跳的駐留時間T_c也在偽隨機非線性變化，即用T_c(ρ_l)來替換T_c；因此雙變跳頻信號能夠表示為:

設雙變跳頻系統的跳速v∈[V_l,V_u]，頻率間隔d∈[D_l,D_u]，則在第k跳中用戶采用跳速v_k對應的駐留時間T_c,k和跳頻頻率f_c,k分別如式(3)和式(4)所示；

f_c,k＝f_c,k-1±d_k,d_k∈[D_l,D_u]?????(4)。