[發(fā)明專(zhuān)利]衛(wèi)星虛擬資源分配方法、裝置、存儲(chǔ)介質(zhì)及設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 202110755403.7
• 申請(qǐng)日: 2021-07-05
• 公開(kāi)（公告）號(hào): CN113342537A
• 公開(kāi)（公告）日: 2021-09-03
• 發(fā)明（設(shè)計(jì)）人: 陳超;向欣;劉允;宋瑞良;盧寧寧;張海鵬
• 申請(qǐng)（專(zhuān)利權(quán)）人: 中國(guó)傳媒大學(xué);中國(guó)電子科技集團(tuán)公司第五十四研究所
• 主分類(lèi)號(hào): G06F9/50
• 分類(lèi)號(hào): G06F9/50;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京細(xì)軟智谷知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11471
• 代理人: 付登云

1.一種衛(wèi)星虛擬資源分配方法，其特征在于，包括：

確定衛(wèi)星需要的最少虛擬資源量和衛(wèi)星的實(shí)際獲得虛擬資源量；

根據(jù)所述衛(wèi)星的最少虛擬資源量和實(shí)際獲得虛擬資源量，構(gòu)建馬爾可夫決策過(guò)程；

將所述馬爾可夫決策過(guò)程關(guān)聯(lián)DDPG算法，獲取目標(biāo)DDPG算法模型；

根據(jù)所述目標(biāo)DDPG算法模型，獲取地面站對(duì)所述衛(wèi)星虛擬資源的分配策略。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述馬爾可夫決策過(guò)程包括：狀態(tài)空間、動(dòng)作空間和獎(jiǎng)勵(lì)函數(shù)；所述根據(jù)所述衛(wèi)星的最少虛擬資源量和實(shí)際獲得虛擬資源量，構(gòu)建馬爾可夫決策過(guò)程，包括：

根據(jù)所述衛(wèi)星的最少虛擬資源量構(gòu)建所述狀態(tài)空間；及，

根據(jù)所述衛(wèi)星的實(shí)際虛擬資源量構(gòu)建所述動(dòng)作空間；及，

根據(jù)所述衛(wèi)星的最少虛擬資源量和實(shí)際獲得虛擬資源量，構(gòu)建所述獎(jiǎng)勵(lì)函數(shù)。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述根據(jù)所述衛(wèi)星的最少虛擬資源量和實(shí)際獲得虛擬資源量，構(gòu)建所述獎(jiǎng)勵(lì)函數(shù)，包括：

根據(jù)衛(wèi)星的優(yōu)先級(jí)、每個(gè)節(jié)點(diǎn)的虛擬資源利用率和理想虛擬資源利用率的偏差值、處理時(shí)延參數(shù)構(gòu)建所述獎(jiǎng)勵(lì)函數(shù)；所述每個(gè)節(jié)點(diǎn)的虛擬資源利用率為所述節(jié)點(diǎn)的最少虛擬資源量和實(shí)際獲得虛擬資源量的比值。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，在所述根據(jù)所述衛(wèi)星的最少虛擬資源量和實(shí)際獲得虛擬資源量，構(gòu)建所述獎(jiǎng)勵(lì)函數(shù)之前，還包括：根據(jù)衛(wèi)星需要處理的數(shù)據(jù)比特?cái)?shù)與實(shí)際數(shù)據(jù)處理速率，構(gòu)建所述處理時(shí)延參數(shù)。

5.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述動(dòng)作空間，包括：離散動(dòng)作和連續(xù)動(dòng)作；所述根據(jù)所述衛(wèi)星的實(shí)際虛擬資源量構(gòu)建所述動(dòng)作空間，包括：

根據(jù)地面站與衛(wèi)星的配對(duì)情況，構(gòu)建所述離散動(dòng)作；

根據(jù)每個(gè)地面站分配給每個(gè)衛(wèi)星的虛擬資源量情況，構(gòu)建所述連續(xù)動(dòng)作。

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述根據(jù)所述衛(wèi)星的實(shí)際虛擬資源量構(gòu)建所述動(dòng)作空間，包括：

對(duì)所述離散動(dòng)作空間進(jìn)行降維；以及，對(duì)所述連續(xù)動(dòng)作空間進(jìn)行降維；

根據(jù)降維后的離散動(dòng)作空間和降維后的連續(xù)動(dòng)作空間，確定目標(biāo)動(dòng)作空間。

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述馬爾可夫決策過(guò)程包括：狀態(tài)空間、動(dòng)作空間和獎(jiǎng)勵(lì)函數(shù)；所述DDPG算法，包括：評(píng)論家模塊；

所述將所述馬爾可夫決策過(guò)程關(guān)聯(lián)DDPG算法，獲取目標(biāo)DDPG算法模型，包括：將所述獎(jiǎng)勵(lì)函數(shù)、狀態(tài)空間、動(dòng)作空間均關(guān)聯(lián)所述評(píng)論家模塊，獲取目標(biāo)DDPG算法模型。

8.一種衛(wèi)星虛擬資源分配裝置，其特征在于，包括：確定模塊、構(gòu)建模塊、獲取模塊和分配模塊；

所述確定模塊，用于確定衛(wèi)星需要的最少虛擬資源量和衛(wèi)星的實(shí)際獲得虛擬資源量；

所述構(gòu)建模塊，用于根據(jù)所述衛(wèi)星的最少虛擬資源量和實(shí)際獲得虛擬資源量，構(gòu)建馬爾可夫決策過(guò)程；

所述獲取模塊，用于將所述馬爾可夫決策過(guò)程關(guān)聯(lián)DDPG算法，獲取目標(biāo)DDPG算法模型；

所述分配模塊，用于根據(jù)所述目標(biāo)DDPG算法模型，獲取地面站對(duì)所述衛(wèi)星虛擬資源的分配策略。

9.一種衛(wèi)星虛擬資源分配存儲(chǔ)介質(zhì)，其特征在于，所述存儲(chǔ)介質(zhì)存儲(chǔ)有計(jì)算機(jī)程序，當(dāng)計(jì)算機(jī)程序被處理器執(zhí)行時(shí)，實(shí)現(xiàn)權(quán)利要求1-7任一所述的衛(wèi)星虛擬資源分配方法中各個(gè)步驟。

10.一種衛(wèi)星虛擬資源分配設(shè)備，其特征在于，包括：處理器，以及與所述處理器相連接的存儲(chǔ)器；

所述存儲(chǔ)器用于存儲(chǔ)計(jì)算機(jī)程序，所述計(jì)算機(jī)程序至少用于執(zhí)行權(quán)利要求1～7任一項(xiàng)所述的衛(wèi)星虛擬資源分配方法；

所述處理器用于調(diào)用并執(zhí)行所述存儲(chǔ)器中的所述計(jì)算機(jī)程序。