[發(fā)明專利]基于神經(jīng)網(wǎng)絡(luò)的動作生成方法、裝置及計(jì)算設(shè)備

有效

• 申請?zhí)枺?/td>: 202110048456.5
• 申請日: 2021-01-14
• 公開（公告）號: CN113592986B
• 公開（公告）日: 2023-05-23
• 發(fā)明（設(shè)計(jì)）人: 周城;張沖;王天舟;李珽光;李世迪
• 申請（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號: G06T13/40
• 分類號: G06T13/40;G06N3/08
• 代理公司: 北京勵(lì)誠知識產(chǎn)權(quán)代理有限公司 11647
• 代理人: 趙爽

1.一種基于神經(jīng)網(wǎng)絡(luò)的動作生成方法，其特征在于，包括：

獲取第i幀圖像中目標(biāo)物的動作信息和動作相位值，所述i為正整數(shù)；

根據(jù)所述第i幀圖像中所述目標(biāo)物的動作信息和動作相位值，使用神經(jīng)網(wǎng)絡(luò)生成第i+1幀圖像中所述目標(biāo)物的動作信息和動作相位變化量；

根據(jù)所述第i+1幀圖像中所述目標(biāo)物的動作信息，在終端設(shè)備顯示所述第i+1幀圖像；

根據(jù)播放所述第i幀圖像時(shí)終端設(shè)備的播放幀率和采集所述目標(biāo)物的原始動作數(shù)據(jù)的預(yù)設(shè)采集幀率，確定第一幀率變化系數(shù)；

根據(jù)所述第一幀率變化系數(shù)，以及所述第i幀圖像中所述目標(biāo)物的動作相位值和所述第i+1幀圖像中所述目標(biāo)物的動作相位變化量，得到所述第i+1幀圖像中所述目標(biāo)物的動作相位值；

根據(jù)所述第i+1幀圖像中所述目標(biāo)物的動作信息和動作相位值，使用神經(jīng)網(wǎng)絡(luò)生成第i+2幀圖像中所述目標(biāo)物的動作信息。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述第i+1幀圖像中所述目標(biāo)物的動作信息和動作相位值，使用神經(jīng)網(wǎng)絡(luò)生成第i+2幀圖像中所述目標(biāo)物的動作信息，包括：

根據(jù)所述第i+1幀圖像中所述目標(biāo)物的動作信息和動作相位值，使用所述神經(jīng)網(wǎng)絡(luò)生成第i+2幀圖像中所述目標(biāo)物的動作信息和動作相位變化量。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述根據(jù)所述第i+1幀圖像中所述目標(biāo)物的動作信息和動作相位值，使用所述神經(jīng)網(wǎng)絡(luò)生成第i+2幀圖像中所述目標(biāo)物的動作信息和動作相位變化量，包括：

獲得用戶輸入的對所述目標(biāo)物的控制指令；

根據(jù)所述控制指令，生成所述目標(biāo)物的第一動作信息；

將所述第一動作信息和所述第i+1幀圖像中所述目標(biāo)物的動作信息進(jìn)行融合，得到所述目標(biāo)物的融合動作信息；

將所述第i+1幀圖像中所述目標(biāo)物的動作相位值和所述融合動作信息輸入所述神經(jīng)網(wǎng)絡(luò)，得到所述神經(jīng)網(wǎng)絡(luò)生成的所述第i+2幀圖像中所述目標(biāo)物的動作信息和動作相位變化量。

4.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述根據(jù)所述第i+1幀圖像中所述目標(biāo)物的動作信息和動作相位值，使用所述神經(jīng)網(wǎng)絡(luò)生成第i+2幀圖像中所述目標(biāo)物的動作信息和動作相位變化量，包括：

將所述第i+1幀圖像中所述目標(biāo)物的動作信息和動作相位值進(jìn)行混合，得到第一混合輸入信息；

將所述第一混合輸入信息輸入所述神經(jīng)網(wǎng)絡(luò)，得到所述神經(jīng)網(wǎng)絡(luò)生成所述第i+2幀圖像中所述目標(biāo)物的動作信息和動作相位變化量。

5.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述神經(jīng)網(wǎng)絡(luò)包括混合系數(shù)網(wǎng)絡(luò)和主網(wǎng)絡(luò)，所述根據(jù)所述第i+1幀圖像中所述目標(biāo)物的動作信息和動作相位值，使用神經(jīng)網(wǎng)絡(luò)生成第i+2幀圖像中所述目標(biāo)物的動作信息和動作相位變化量，包括：

將所述第i+1幀圖像中所述目標(biāo)物的動作信息輸入所述主網(wǎng)絡(luò)，將所述第i+1幀圖像中所述目標(biāo)物的動作相位值輸入所述混合系數(shù)網(wǎng)絡(luò)，得到所述神經(jīng)網(wǎng)絡(luò)生成的所述第i+2幀圖像中所述目標(biāo)物的動作信息和動作相位變化量。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述第一幀率變化系數(shù)，以及所述第i幀圖像中所述目標(biāo)物的動作相位值和所述第i+1幀圖像中所述目標(biāo)物的動作相位變化量，得到所述第i+1幀圖像中所述目標(biāo)物的動作相位值，包括：

根據(jù)所述第一幀率變化系數(shù)和所述第i+1幀圖像中所述目標(biāo)物的動作相位變化量，得到第二動作相位變化量；

根據(jù)所述第二動作相位變化量和所述第i幀圖像中目標(biāo)物的動作相位值，得到所述第i+1幀圖像中所述目標(biāo)物的動作相位值。

7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述根據(jù)所述第一幀率變化系數(shù)和所述第i+1幀圖像中所述目標(biāo)物的動作相位變化量，得到第二動作相位變化量，包括：

將所述第一幀率變化系數(shù)與所述第i+1幀圖像中目標(biāo)物的動作相位變化量的乘積，作為所述第二動作相位變化量。