[發(fā)明專利]一種提升無線通信下行鏈路傳輸性能的方法

在審

• 申請?zhí)枺?/td>: 202210081588.2
• 申請日: 2022-01-24
• 公開（公告）號: CN114362888A
• 公開（公告）日: 2022-04-15
• 發(fā)明（設計）人: 付立群;葉小文;岳蕾
• 申請（專利權）人: 廈門大學
• 主分類號: H04L1/00
• 分類號: H04L1/00;H04L5/00;H04B7/06;G06N3/04;G06N3/08
• 代理公司: 廈門南強之路專利事務所(普通合伙) 35200
• 代理人: 馬應森

1.一種提升無線通信下行鏈路傳輸性能的方法，其特征在于包括以下步驟：

1)初始化算法參數(shù)；

2)根據(jù)最新接收到的CQI反饋以及一些歷史信息生成狀態(tài)；

3)將狀態(tài)輸入到深度神經(jīng)網(wǎng)絡中生成對應每一動作即MCS的價值，進而采用∈-greedy算法選擇本次數(shù)據(jù)傳輸所要采用的MCS；

4)根據(jù)所選的MCS，將對應比特的信息打包到傳輸塊中，然后將傳輸塊發(fā)送給用戶；

5)用戶對接收到傳輸塊解碼，然后根據(jù)解碼的結果，反饋ACK/NACK信號給智能體；

6)根據(jù)用戶反饋的ACK/NACK計算獎勵，并將“狀態(tài)”、“動作”、“獎勵”以及“下一狀態(tài)”作為一個經(jīng)驗存儲到經(jīng)驗池中；

7)不斷從經(jīng)驗池中抽取經(jīng)驗樣本以訓練深度神經(jīng)網(wǎng)絡；

8)更新執(zhí)行的TTI t，即t＝t+1，若t小于設定的總時長T，則重返步驟2)；否則，終止。

2.如權利要求1所述一種提升無線通信下行鏈路傳輸性能的方法，其特征在于在步驟1)中，所述初始化算法參數(shù)的具體步驟為：在時變的無線通信下行傳輸鏈路中，用戶可報告的CQI值有K種，基站可供選擇的MCS有M種；假設深度神經(jīng)網(wǎng)絡的參數(shù)θ初始化為隨機值，用于存儲經(jīng)驗樣本的緩沖池大小設置為B，每次從緩沖池中抽取的用于訓練深度神經(jīng)網(wǎng)絡的經(jīng)驗樣本總數(shù)設置為N_e。

3.如權利要求1所述一種提升無線通信下行鏈路傳輸性能的方法，其特征在于在步驟2)中，所述CQI反饋，包括：(1)最近從用戶端接收到的CQI值；(2)最近兩個連續(xù)TTI之間的CQI差異；當CQI差值小于0時，表示信道質量暫時下降；當CQI差值等于0時，表示信道質量沒有變化；當CQI差值大于0時，表示信道質量正在暫時改善；(3)智能體在上一TTI的動作和觀察值；若收到用戶反饋的ACK信號，則智能體的觀測將是“成功”，表示其發(fā)送的傳輸塊被用戶成功接收；若收到用戶反饋的NACK信號，則智能體的觀測將是“失敗”，表示其發(fā)送的傳輸塊沒有被用戶成功接收。

4.如權利要求1所述一種提升無線通信下行鏈路傳輸性能的方法，其特征在于在步驟3)中，所述將狀態(tài)輸入到深度神經(jīng)網(wǎng)絡中生成對應每一動作即MCS的價值，進而采用∈-greedy算法選擇本次數(shù)據(jù)傳輸所要采用的MCS的具體步驟為：智能體將步驟2)生成的狀態(tài)s_t輸入到深度神經(jīng)網(wǎng)絡，以獲得對應每一種動作/MCS a的價值，即Q(s_t，a；θ)；所有MCS對應的Q值表示為Q＝{Q(s_t，a；θ)|a∈{0，1，2，…，M}}；進一步，智能體根據(jù)∈-greedy算法選擇一個動作a_t執(zhí)行，如下：

5.如權利要求1所述一種提升無線通信下行鏈路傳輸性能的方法，其特征在于在步驟4)中，所述根據(jù)所選的MCS，將對應比特的信息打包到傳輸塊中，然后將傳輸塊發(fā)送給用戶的具體步驟為：智能體根據(jù)所選的MCS，將比特的信息編碼和位交織成可變大小的傳輸塊；然后，智能體通過時變的信道將傳輸塊發(fā)送給用戶。

6.如權利要求1所述一種提升無線通信下行鏈路傳輸性能的方法，其特征在于在步驟5)中，所述用戶對接收到傳輸塊解碼，然后根據(jù)解碼的結果，反饋ACK/NACK信號給智能體的具體步驟為：用戶對接收到的傳輸塊進行解碼，其中循環(huán)冗余校驗被用于判定用戶是否能成功對接收到的信號進行解碼；若用戶解碼成功，則發(fā)送ACK信號給智能體，以表明智能體的傳輸是成功的；否則，用戶發(fā)送NACK信號給智能體，以表明智能體發(fā)送的傳輸塊沒有被用戶成功接收。