[發(fā)明專利]基于神經(jīng)網(wǎng)絡(luò)的動作生成方法、裝置及計算設(shè)備

有效

• 申請?zhí)枺?/td>: 202110048456.5
• 申請日: 2021-01-14
• 公開（公告）號: CN113592986B
• 公開（公告）日: 2023-05-23
• 發(fā)明（設(shè)計）人: 周城;張沖;王天舟;李珽光;李世迪
• 申請（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號: G06T13/40
• 分類號: G06T13/40;G06N3/08
• 代理公司: 北京勵誠知識產(chǎn)權(quán)代理有限公司 11647
• 代理人: 趙爽

本申請實施例提供一種基于神經(jīng)網(wǎng)絡(luò)的動作生成方法、裝置及計算設(shè)備，該方法包括：獲取第i幀圖像中目標(biāo)物的動作信息和動作相位值，根據(jù)第i幀圖像中目標(biāo)物的動作信息和動作相位值，使用神經(jīng)網(wǎng)絡(luò)生成第i+1幀圖像中目標(biāo)物的動作信息和動作相位變化量；根據(jù)終端設(shè)備的播放幀率和預(yù)設(shè)采集幀率，確定第一幀率變化系數(shù)，并根據(jù)第一幀率變化系數(shù)，以及第i幀圖像中目標(biāo)物的動作相位值和第i+1幀圖像中目標(biāo)物的動作相位變化量，得到第i+1幀圖像中目標(biāo)物的動作相位值；根據(jù)第i+1幀圖像中目標(biāo)物的動作信息和動作相位值，使用神經(jīng)網(wǎng)絡(luò)生成第i+2幀圖像中目標(biāo)物的動作信息。實現(xiàn)變幀率環(huán)境下的動作生成，且存儲負(fù)擔(dān)小。

技術(shù)領(lǐng)域

本申請實施例涉及人工智能技術(shù)領(lǐng)域，尤其涉及一種基于神經(jīng)網(wǎng)絡(luò)的動作生成方法、裝置及計算設(shè)備。

背景技術(shù)

動作生成在游戲制作和機器人規(guī)劃和控制領(lǐng)域都有重要意義。動作生成技術(shù)主要有兩類，一類是重復(fù)播放已有動作素材，另一類則利用神經(jīng)網(wǎng)絡(luò)對已有動作素材庫進行學(xué)習(xí)，然后利用神經(jīng)網(wǎng)絡(luò)直接生成動作。

在實際應(yīng)用中，由于網(wǎng)絡(luò)同步、動作效果和硬件能力等的限制，動作的播放幀率會發(fā)生變化，這就要求動作生成技術(shù)必須能夠適應(yīng)變幀率的環(huán)境。目前利用神經(jīng)網(wǎng)絡(luò)生成動作的技術(shù)，通過維護多個不同幀率的模型，實現(xiàn)變幀率的環(huán)境動作的生成。

但是，維護多個不同幀率的模型需要耗費較多的存儲資源。

發(fā)明內(nèi)容

本申請實施例提供一種基于神經(jīng)網(wǎng)絡(luò)的動作生成方法、裝置及計算設(shè)備，實現(xiàn)在變幀率環(huán)境下使用神經(jīng)網(wǎng)絡(luò)生成動作時，減小存儲資源的耗費。

第一方面，本申請實施例提供一種基于神經(jīng)網(wǎng)絡(luò)的動作生成方法，包括：

獲取第i幀圖像中目標(biāo)物的動作信息和動作相位值，所述i為正整數(shù)；

根據(jù)所述第i幀圖像中所述目標(biāo)物的動作信息和動作相位值，使用神經(jīng)網(wǎng)絡(luò)生成第i+1幀圖像中所述目標(biāo)物的動作信息和動作相位變化量；

根據(jù)所述第i+1幀圖像中所述目標(biāo)物的動作信息，在終端設(shè)備顯示所述第i+1幀圖像；

根據(jù)播放所述第i幀圖像時終端設(shè)備的播放幀率和采集所述目標(biāo)物的原始動作數(shù)據(jù)的預(yù)設(shè)采集幀率，確定第一幀率變化系數(shù)；

根據(jù)所述第一幀率變化系數(shù)，以及所述第i幀圖像中所述目標(biāo)物的動作相位值和所述第i+1幀圖像中所述目標(biāo)物的動作相位變化量，得到所述第i+1幀圖像中所述目標(biāo)物的動作相位值；

根據(jù)所述第i+1幀圖像中所述目標(biāo)物的動作信息和動作相位值，使用神經(jīng)網(wǎng)絡(luò)生成第i+2幀圖像中所述目標(biāo)物的動作信息。

可選的，所述動作信息包括所述目標(biāo)物的骨骼關(guān)節(jié)信息、軌跡信息和目標(biāo)點信息中的一個或多個。

例如，所述骨骼關(guān)節(jié)信息包括骨骼關(guān)節(jié)的位置、速度和方向中的一個或多個。

例如，所述軌跡信息包括位置、方向、動作類型和地形信息中的一個或多個。

例如，所述目標(biāo)點信息包括所述目標(biāo)點的位置、方向和動作類型中的一個或多個。

第二方面，本申請實施例提供一種基于神經(jīng)網(wǎng)絡(luò)的動作生成裝置，包括：

獲取單元，用于獲取第i幀圖像中目標(biāo)物的動作信息和動作相位值，i為正整數(shù)；

第一生成單元，用于根據(jù)第i幀圖像中目標(biāo)物的動作信息和動作相位值，使用神經(jīng)網(wǎng)絡(luò)生成第i+1幀圖像中目標(biāo)物的動作信息和動作相位變化量；

顯示單元，用于根據(jù)所述第i+1幀圖像中所述目標(biāo)物的動作信息，在終端設(shè)備顯示所述第i+1幀圖像；

第一確定單元，用于根據(jù)播放第i幀圖像時終端設(shè)備的播放幀率和采集目標(biāo)物的原始動作數(shù)據(jù)的預(yù)設(shè)采集幀率，確定第一幀率變化系數(shù)；