[發(fā)明專利]用于在視頻游戲中模仿玩家玩游戲的定制的模型

在審

• 申請?zhí)枺?/td>: 202010621940.8
• 申請日: 2020-07-01
• 公開（公告）號: CN112169339A
• 公開（公告）日: 2021-01-05
• 發(fā)明（設(shè)計(jì)）人: C·薩默斯;J·魯珀特;I·保羅維科夫;A·貝拉米;Y·趙;M·薩爾達(dá)里;H·H·查普特;N·阿格戴爾;K·A-U·扎曼
• 申請（專利權(quán)）人: 電子技術(shù)公司
• 主分類號: A63F13/67
• 分類號: A63F13/67;G06N20/00
• 代理公司: 北京匯知杰知識產(chǎn)權(quán)代理有限公司 11587
• 代理人: 李潔;董江虹

公開了以旨在模仿特定玩家將如何控制角色或?qū)嶓w的方式訓(xùn)練機(jī)器學(xué)習(xí)模型以控制視頻游戲中的游戲中角色或其他實(shí)體的系統(tǒng)和方法。可以獲得與特定玩家無關(guān)地訓(xùn)練的通用行為模型，并且然后基于所觀察的特定玩家的玩游戲定制所述通用行為模型。定制訓(xùn)練過程可以包括凍結(jié)通用模型中的層或?qū)哟蔚闹辽僖粋€子集，然后生成使用所述特定玩家的玩游戲數(shù)據(jù)訓(xùn)練的一個或多個附加的層或?qū)哟巍?/p>

相關(guān)申請的交叉引用

本申請要求享有于2019年7月2日提交的第16/460,871號美國專利申請的權(quán)益，所述美國專利申請的全部內(nèi)容據(jù)此通過引用并入本文。

背景技術(shù)

視頻游戲常常包括玩家控制的角色和非玩家角色(NPC)二者。傳統(tǒng)上玩家通過經(jīng)由游戲控制器(諸如具有按鈕的控制器、方向墊、操縱桿和/或其他物理控制機(jī)構(gòu))、鍵盤、鼠標(biāo)、觸摸屏或其他輸入設(shè)備提供的命令來控制視頻游戲中的他的或她的玩家控制的角色。多玩家游戲常常使得多個遠(yuǎn)程定位的玩家能夠以協(xié)作的方式——諸如在同一團(tuán)隊(duì)、黨派、氏族或其他分組上——一起玩。多玩家游戲可以附加地或替代地包括單獨(dú)地或者作為團(tuán)隊(duì)與其他玩家競爭的玩家。

除了玩家控制的虛擬實(shí)體或角色之外，許多視頻游戲還包括軟件控制的虛擬實(shí)體或角色。在視頻游戲中，這些軟件控制的或以編程方式控制的角色有時可以被稱為計(jì)算機(jī)玩家、網(wǎng)上機(jī)器人(bot)、人工智能(“AI”)單元、AI角色或非玩家角色(NPC)。NPC可以被編程為以對人類玩家顯得逼真的方式響應(yīng)于游戲中刺激(諸如涉及其他NPC或玩家控制的角色的游戲中動作或事件)。傳統(tǒng)上，作為游戲開發(fā)過程的一部分，通常預(yù)先編程用于給定的NPC的行為。

發(fā)明內(nèi)容

本公開內(nèi)容的系統(tǒng)、方法和設(shè)備各自具有若干創(chuàng)新方面，其中沒有一個方面單獨(dú)擔(dān)負(fù)本文所公開的所有期望屬性。

在一些實(shí)施方案中，一種系統(tǒng)可以包括數(shù)據(jù)存儲器，所述數(shù)據(jù)存儲器存儲與一個或多個視頻游戲相關(guān)聯(lián)的通用玩家行為模型，其中所述通用玩家行為模型被配置為提供待在多個玩游戲情形中的每個中執(zhí)行的游戲中動作的指示。所述系統(tǒng)還可以包括計(jì)算系統(tǒng)，所述計(jì)算系統(tǒng)與所述數(shù)據(jù)存儲器電子通信并且被配置為執(zhí)行計(jì)算機(jī)可讀指令，所述計(jì)算機(jī)可讀指令將所述計(jì)算系統(tǒng)配置為：從所述數(shù)據(jù)存儲器檢索所述通用玩家行為模型，其中在檢索之前已經(jīng)基于一個或多個玩家的玩游戲數(shù)據(jù)而與第一玩家的玩游戲數(shù)據(jù)無關(guān)地訓(xùn)練了所述通用玩家行為模型，并且所述通用玩家行為模型是包括多個層的機(jī)器學(xué)習(xí)模型；獲得所述第一玩家的玩游戲數(shù)據(jù)，其中該玩游戲數(shù)據(jù)標(biāo)識在視頻游戲中的多個游戲狀態(tài)中的每個游戲狀態(tài)下由所述第一玩家執(zhí)行的游戲中動作；將所述通用玩家行為模型中的所述多個層的至少一個子集指定為待在與所述第一玩家相關(guān)聯(lián)的定制模型中使用的凍結(jié)層；基于所述第一玩家的所述玩游戲數(shù)據(jù)生成用于所述定制模型的一個或多個定制層，其中所述一個或多個定制層至少部分地依賴于所述通用玩家行為模型的所述凍結(jié)層，以預(yù)測在至少一個或多個游戲狀態(tài)下將由所述第一玩家執(zhí)行的游戲中動作；以及存儲與所述第一玩家相關(guān)聯(lián)的經(jīng)訓(xùn)練的定制模型，其中所述經(jīng)訓(xùn)練的定制模型包括所述一個或多個定制層并且還包括或依賴于所述通用玩家行為模型的所述凍結(jié)層，其中所述經(jīng)訓(xùn)練的定制模型被配置為接收關(guān)于所述視頻游戲的游戲狀態(tài)的數(shù)據(jù)作為輸入并且輸出待在所述視頻游戲中執(zhí)行的自動化動作。