[發(fā)明專利]一種游戲中機(jī)器人的訓(xùn)練方法、系統(tǒng)和電子設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 202210240801.X
• 申請(qǐng)日: 2022-03-10
• 公開（公告）號(hào): CN114699771A
• 公開（公告）日: 2022-07-05
• 發(fā)明（設(shè)計(jì)）人: 王昭蓉
• 申請(qǐng)（專利權(quán)）人: 網(wǎng)易（杭州）網(wǎng)絡(luò)有限公司
• 主分類號(hào): A63F13/67
• 分類號(hào): A63F13/67;A63F13/58;A63F13/46
• 代理公司: 北京清源匯知識(shí)產(chǎn)權(quán)代理事務(wù)所(特殊普通合伙) 11644
• 代理人: 馮德魁

本申請(qǐng)?zhí)峁┝艘环N游戲中機(jī)器人的訓(xùn)練方法，包括：獲取待訓(xùn)練的機(jī)器人的狀態(tài)信息，以及所述機(jī)器人預(yù)設(shè)范圍內(nèi)的玩家的玩家信息(包括：結(jié)算信息、狀態(tài)信息和動(dòng)作信息)；將所述結(jié)算信息處理成為元數(shù)據(jù)形式的第一數(shù)據(jù)表，將所述狀態(tài)信息和所述動(dòng)作信息處理成為數(shù)據(jù)對(duì)形式的第二數(shù)據(jù)表，將第一數(shù)據(jù)表和第二數(shù)據(jù)表拼接成為結(jié)果數(shù)據(jù)表；基于所述機(jī)器人的狀態(tài)信息和所述結(jié)果數(shù)據(jù)表，通過模仿學(xué)習(xí)建立用于輸出所述機(jī)器人待執(zhí)行動(dòng)作的狀態(tài)動(dòng)作模型。該方法通過將獲取的玩家結(jié)算信息、狀態(tài)信息和動(dòng)作信息處理成為提供機(jī)器人模仿學(xué)習(xí)的訓(xùn)練數(shù)據(jù)，使訓(xùn)練出的機(jī)器人更接近于真實(shí)玩家，機(jī)器人代替缺席玩家參與游戲時(shí)，能夠顯著提高玩家的游戲體驗(yàn)感。

技術(shù)領(lǐng)域

本申請(qǐng)涉及計(jì)算機(jī)技術(shù)領(lǐng)域，尤其涉及一種游戲中機(jī)器人的訓(xùn)練方法、系統(tǒng)、電子設(shè)備和計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。

背景技術(shù)

隨著計(jì)算機(jī)游戲技術(shù)的發(fā)展，多人在線對(duì)戰(zhàn)游戲越來越受到游戲玩家的喜愛。但是多人在線對(duì)戰(zhàn)游戲需要在參賽人數(shù)達(dá)到要求(例如：參賽人數(shù)40人)后方可開啟。為了使玩家不受人數(shù)限制就可以玩到游戲，需要提供一種人工智能機(jī)器人代替玩家，補(bǔ)充玩家空缺。

現(xiàn)有技術(shù)提供的機(jī)器人存在行為風(fēng)格與玩家差別較大等技術(shù)問題，玩家體驗(yàn)不高。

發(fā)明內(nèi)容

本申請(qǐng)?zhí)峁┝艘环N游戲中機(jī)器人的訓(xùn)練方法、系統(tǒng)和電子設(shè)備，以解決現(xiàn)有技術(shù)存在的無法在大型多人對(duì)戰(zhàn)游戲中提供風(fēng)格像人的機(jī)器人的技術(shù)問題。

本申請(qǐng)實(shí)施例提供了一種游戲中機(jī)器人的訓(xùn)練方法，包括：

獲取待訓(xùn)練的機(jī)器人的狀態(tài)信息，以及所述機(jī)器人預(yù)設(shè)范圍內(nèi)的玩家的玩家信息；所述玩家信息至少包括所述玩家對(duì)應(yīng)的游戲?qū)?zhàn)的結(jié)算信息、所述玩家的狀態(tài)信息和所述玩家的動(dòng)作信息；所述玩家的狀態(tài)信息包括所述玩家的自身狀態(tài)信息和所述玩家對(duì)應(yīng)的場(chǎng)地信息；

將所述結(jié)算信息處理成為元數(shù)據(jù)形式的第一數(shù)據(jù)表，將所述玩家的狀態(tài)信息和所述玩家的動(dòng)作信息處理成為數(shù)據(jù)對(duì)形式的第二數(shù)據(jù)表，根據(jù)所述玩家對(duì)應(yīng)的場(chǎng)地信息將所述第一數(shù)據(jù)表和所述第二數(shù)據(jù)表拼接成為結(jié)果數(shù)據(jù)表，所述結(jié)果數(shù)據(jù)表中的每行包含所述玩家在一場(chǎng)游戲?qū)?zhàn)中的結(jié)算元數(shù)據(jù)信息，狀態(tài)信息和動(dòng)作信息；

基于所述機(jī)器人的狀態(tài)信息和所述結(jié)果數(shù)據(jù)表，通過模仿學(xué)習(xí)建立用于輸出所述機(jī)器人待執(zhí)行動(dòng)作的狀態(tài)動(dòng)作模型。

可選的，所述機(jī)器人的狀態(tài)信息，包括所述機(jī)器人的自身狀態(tài)信息和所述機(jī)器人對(duì)應(yīng)的場(chǎng)地信息。

可選的，所述動(dòng)作信息包括以下至少一種：移動(dòng)動(dòng)作、技能動(dòng)作、拾取動(dòng)作。

可選的，所述將所述結(jié)算信息處理成為元數(shù)據(jù)形式的第一數(shù)據(jù)表，將所述玩家的狀態(tài)信息和所述玩家的動(dòng)作信息處理成為數(shù)據(jù)對(duì)形式的第二數(shù)據(jù)表，根據(jù)所述玩家對(duì)應(yīng)的場(chǎng)地信息將所述第一數(shù)據(jù)表和所述第二數(shù)據(jù)表拼接成為結(jié)果數(shù)據(jù)表，包括：采用Spark算子，將所述結(jié)算信息處理成為元數(shù)據(jù)形式的第一數(shù)據(jù)表，將所述玩家的狀態(tài)信息和所述玩家的動(dòng)作信息處理成為數(shù)據(jù)對(duì)形式的第二數(shù)據(jù)表，以及根據(jù)所述玩家對(duì)應(yīng)的場(chǎng)地信息將所述第一數(shù)據(jù)表和所述第二數(shù)據(jù)表拼接成為結(jié)果數(shù)據(jù)表。

可選的，所述將所述玩家的狀態(tài)信息和所述玩家的動(dòng)作信息處理成為數(shù)據(jù)對(duì)形式的第二數(shù)據(jù)表，包括：

確定所述動(dòng)作信息中目標(biāo)技能幀的前面N個(gè)動(dòng)作幀是否均為移動(dòng)幀，若是，則將所述動(dòng)作信息中所述目標(biāo)技能幀的前面N個(gè)動(dòng)作幀修改為技能幀；

和/或，

確定所述目標(biāo)技能幀的后面N個(gè)動(dòng)作幀是否均為移動(dòng)幀，若是，則將所述動(dòng)作信息中所述目標(biāo)技能幀的后面N個(gè)動(dòng)作幀修改為技能幀；

將所述玩家的狀態(tài)信息和所述玩家修改后的動(dòng)作信息處理為數(shù)據(jù)對(duì)形式的第二數(shù)據(jù)表，其中，所述N為正整數(shù)。

可選的，所述方法還包括：