[發(fā)明專利]基于分布式獨(dú)立學(xué)習(xí)的多用戶動(dòng)態(tài)頻譜接入方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201110197066.0
• 申請(qǐng)日: 2011-07-14
• 公開（公告）號(hào): CN102256262A
• 公開（公告）日: 2011-11-23
• 發(fā)明（設(shè)計(jì)）人: 朱琦;朱洪波;楊龍祥;李曉靜
• 申請(qǐng)（專利權(quán)）人: 南京郵電大學(xué)
• 主分類號(hào): H04W16/10
• 分類號(hào): H04W16/10;H04W16/14;H04W74/00
• 代理公司: 南京經(jīng)緯專利商標(biāo)代理有限公司 32200
• 代理人: 葉連生

1.一種基于分布式獨(dú)立學(xué)習(xí)的多用戶動(dòng)態(tài)頻譜接入方法，其特征在于該方法的具體內(nèi)容為：

a、初始化：初始化每個(gè)認(rèn)知用戶????????????????????????????????????????????????的狀態(tài)-動(dòng)作函數(shù)值?，其中sS，S為認(rèn)知用戶感知到的環(huán)境狀態(tài)，為認(rèn)知用戶的動(dòng)作，為系統(tǒng)中授權(quán)用戶的動(dòng)作；

b、狀態(tài)構(gòu)建：每個(gè)認(rèn)知用戶由狀態(tài)感知模塊感知頻譜環(huán)境，根據(jù)感知到的授權(quán)用戶占用頻譜的情況和每個(gè)認(rèn)知用戶自身占用的情況構(gòu)建狀態(tài)空間S，S?=?{,,…,,,，…,}，其中表示主用戶占用的頻點(diǎn)，k為主用戶數(shù)，表示認(rèn)知用戶占用的頻點(diǎn)，表示m個(gè)認(rèn)知用戶，=0表示頻譜k被占用；=1表示頻譜k未被占用；

c、狀態(tài)-動(dòng)作函數(shù)值獲取：每個(gè)認(rèn)知用戶根據(jù)構(gòu)建的狀態(tài)和動(dòng)作預(yù)測(cè)模塊預(yù)測(cè)的授權(quán)用戶將要采取的動(dòng)作,?從自己的狀態(tài)-動(dòng)作函數(shù)值表征模塊獲取的值；

d、動(dòng)作選擇和執(zhí)行：各個(gè)認(rèn)知用戶根據(jù)和動(dòng)作選擇策略更新規(guī)則,?采用貪婪算法從A中選擇兩個(gè)動(dòng)作和并執(zhí)行，其中A為認(rèn)知用戶作用于環(huán)境的動(dòng)作集合，為其中一個(gè)認(rèn)知用戶執(zhí)行的動(dòng)作，為另一個(gè)認(rèn)知用戶執(zhí)行的動(dòng)作；

e、獲取回報(bào)：設(shè)定當(dāng)系統(tǒng)發(fā)生沖突時(shí),?系統(tǒng)的獎(jiǎng)賞函數(shù)，不沖突時(shí),??系統(tǒng)的獎(jiǎng)賞函數(shù)；獎(jiǎng)賞函數(shù)前面一部分的參數(shù)反映降低沖突概率的要求，當(dāng)認(rèn)知用戶與主用戶或者其他認(rèn)知用戶發(fā)生沖突時(shí)，即兩者占用同一頻點(diǎn)，獎(jiǎng)賞函數(shù)為-5；當(dāng)認(rèn)知用戶與主用戶或者其他認(rèn)知用戶沒有發(fā)生沖突時(shí)，即兩者占用不同的頻點(diǎn)，獎(jiǎng)賞函數(shù)為1；獎(jiǎng)賞函數(shù)后一部分反映了認(rèn)知用戶占用該信道時(shí)信噪比對(duì)獎(jiǎng)賞函數(shù)的影響，其中為第j個(gè)信道的信噪比占系統(tǒng)總信噪比的百分比，p(n)為第n個(gè)信道的信噪比，N為系統(tǒng)的信道數(shù)，a，b為常數(shù)；

f、狀態(tài)-動(dòng)作函數(shù)值更新：各個(gè)認(rèn)知用戶維護(hù)自己的狀態(tài)-動(dòng)作函數(shù)值，動(dòng)作執(zhí)行后，?新的狀態(tài)及其所有的狀態(tài)-動(dòng)作函數(shù)值就能夠由步驟b和c得到。