[發(fā)明專利]任務卸載方法、系統(tǒng)、裝置和存儲介質

有效

• 申請?zhí)枺?/td>: 202011061127.6
• 申請日: 2020-09-30
• 公開（公告）號: CN112202886B
• 公開（公告）日: 2023-06-23
• 發(fā)明（設計）人: 唐冬;李福樂
• 申請（專利權）人: 廣州大學
• 主分類號: H04L67/59
• 分類號: H04L67/59;G06F9/445;G06F9/50
• 代理公司: 廣州嘉權專利商標事務所有限公司 44205
• 代理人: ?？玛?/td>

本發(fā)明公開了一種任務卸載方法、系統(tǒng)、裝置和存儲介質，任務卸載方法包括執(zhí)行決策過程，確定網(wǎng)絡狀態(tài)值、即時獎勵值和長期效用值，以及以最優(yōu)決策過程所確定的第一終端、第二終端和協(xié)作卸載終端執(zhí)行任務卸載等步驟。通過匹配第一終端和第二終端，并且令其中一個終端作為另一個終端的協(xié)作卸載終端，可以實現(xiàn)并行傳輸結構以進行協(xié)作卸載，例如將一個終端的任務數(shù)據(jù)并行地卸載給協(xié)作卸載終端和接入點，從而達到降低任務卸載延遲和能量消耗；與現(xiàn)有技術相比，實施例中的任務卸載方法更適用于多終端的環(huán)境，并且可以實現(xiàn)更大范圍的延遲優(yōu)化，例如在更長的一段時間里總的時間消耗和資源消耗的優(yōu)化。本發(fā)明廣泛應用于移動通信技術領域。

技術領域

本發(fā)明涉及移動通信技術領域，尤其是一種任務卸載方法、系統(tǒng)、裝置和存儲介質。

背景技術

在NOMA-MEC等5G通信技術中，為實現(xiàn)通信過程，移動終端需要進行任務卸載，例如移動終端將任務數(shù)據(jù)卸載至接入點(AP)等。任務卸載過程所面臨的問題中包括延遲問題?；谶吘売嬎愕娜蝿招遁d技術是一種能減少任務卸載的延遲的現(xiàn)有技術，邊緣計算的原理是把原先由核心節(jié)點進行的事務處理，分到各邊緣節(jié)點進行處理，并靠近終端用戶來布局，從而使系統(tǒng)更高效更易于管理，正是由于邊緣節(jié)點更接近用戶終端裝置，可以加快資料的處理和傳送速度，減少延遲。但是基于邊緣計算的任務卸載技術在未事先知道其他終端的行為的情況下，所獲得的單點的最優(yōu)匹配，但是不能保證在長的一段時間里總的時間消耗和資源消耗得到了優(yōu)化。

發(fā)明內容

針對上述至少一個技術問題，本發(fā)明的目的在于提供一種任務卸載方法、系統(tǒng)、裝置和存儲介質。

一方面，本發(fā)明實施例包括一種任務卸載方法，包括：

執(zhí)行決策過程；所述決策過程用于確定與第一終端匹配的第二終端，根據(jù)判定條件，將所述第二終端設定為所述第一終端的協(xié)作卸載終端，或者將所述第一終端設定為所述第二終端的協(xié)作卸載終端；

根據(jù)所述協(xié)作卸載終端的設定結果，確定網(wǎng)絡狀態(tài)值；

根據(jù)所述網(wǎng)絡狀態(tài)值以及所述決策過程中所執(zhí)行的動作，確定即時獎勵值；

根據(jù)所述即時獎勵值，確定長期效用值；

確定最優(yōu)決策過程；所述最優(yōu)決策過程為使所述長期效用值最大化的決策過程；

以所述最優(yōu)決策過程所確定的第一終端、第二終端和協(xié)作卸載終端，執(zhí)行任務卸載。

進一步地，所述任務卸載方法還包括以下步驟：

訓練神經(jīng)網(wǎng)絡；所述神經(jīng)網(wǎng)絡的輸入包括所述網(wǎng)絡狀態(tài)值以及所述決策過程中所執(zhí)行的動作；

當所述神經(jīng)網(wǎng)絡的輸出與最大化的所述長期效用值之間的偏差小于預設閾值，結束對所述神經(jīng)網(wǎng)絡的訓練。

進一步地，所述訓練神經(jīng)網(wǎng)絡中，以均方誤差作為損失函數(shù)。

進一步地，所述根據(jù)判定條件，將所述第二終端設定為所述第一終端的協(xié)作卸載終端，或者將所述第一終端設定為所述第二終端的協(xié)作卸載終端，包括：

確定第一卸載延遲和第二卸載延遲；所述第一卸載延遲為所述第一終端在OMA模式下的卸載延遲，所述第二卸載延遲為所述第二終端在OMA模式下的卸載延遲；

當所述第二卸載延遲小于所述第一卸載延遲，將所述第二終端設定為所述第一終端的協(xié)作卸載終端；

當所述第一卸載延遲小于所述第二卸載延遲，將所述第一終端設定為所述第二終端的協(xié)作卸載終端。

進一步地，所述即時獎勵值為所述第一卸載延遲和所述第二卸載延遲之和的相反數(shù)。

進一步地，當所述第二終端為所述第一終端的協(xié)作卸載終端，所述以所述最優(yōu)決策過程所確定的第一終端、第二終端和協(xié)作卸載終端，執(zhí)行任務卸載，包括：