[發明專利]一種三維動作的風格遷移方法、介質、裝置和計算設備

有效

• 申請號: 201810499122.8
• 申請日: 2018-05-23
• 公開（公告）號: CN108961428B
• 公開（公告）日: 2023-05-26
• 發明（設計）人: 侯杰;李曉燕;叢林;夏侯佐鑫;溫翔;沈旭東
• 申請（專利權）人: 杭州易現先進科技有限公司
• 主分類號: G06T19/20
• 分類號: G06T19/20
• 代理公司: 北京展翅星辰知識產權代理有限公司 11693
• 代理人: 王文生

1.一種三維動作的風格遷移方法，其特征在于，包括：

提取目標動作的目標動作特征，所述目標動作是具有原始動作風格的目標三維動作；以及

提取風格動作的風格動作特征，所述風格動作是具有目標動作風格的三維動作，所述風格動作與所述目標動作不相同；

將所述目標動作特征與所述風格動作特征進行融合生成目標風格動作，其中包括：通過特征融合網絡將所述目標動作特征與所述風格動作特征進行融合得到所述目標風格動作特征，其中，所述特征融合網絡為具有對動作場中的多個動作特征進行融合的功能的網絡結構；基于所述目標風格動作特征生成所述目標風格動作，所述目標風格動作是具有所述目標動作風格的目標三維動作；

提取所述動作特征的方法，包括：

輸入待提取動作，所述待提取動作包括所述目標動作和所述風格動作；

通過特征提取網絡從所述待提取動作中提取出所述待提取動作的動作特征，所述特征提取網絡用于提取所述待提取動作映射到動作場中對應的動作特征，所述動作場是用于承載和描述三維動作的動作特征的特征空間，所述待提取動作的動作特征包括所述目標動作特征和所述風格動作特征；

所述通過特征融合網絡將所述目標動作特征與所述風格動作特征進行融合得到所述目標風格動作特征，包括：

根據原始特征相似度將所述目標動作特征映射到所述特征融合網絡中，所述原始特征相似度用于指示所述目標動作特征在所述目標風格動作特征中所占的權重；以及

根據動作風格相似度將所述風格動作特征映射到所述特征融合網絡中，所述動作風格相似度用于指示所述風格動作特征在所述目標風格動作特征中所占的權重；

通過所述特征融合網絡對映射到所述特征融合網絡中的所述目標動

作特征和所述風格動作特征進行融合得到所述目標風格動作特征。

2.如權利要求1所述的方法，其特征在于，所述特征融合網絡中所述目標動作特征的動作特征維度與所述風格動作特征的動作特征維度一致，所述動作特征維度是指用于承載動作特征的特征向量的長度。

3.如權利要求1所述的方法，其特征在于，所述基于所述目標風格動作特征生成所述目標風格動作，包括：

將所述目標風格動作特征輸入動作生成網絡，所述動作生成網絡是用于將動作場中的動作特征映射為三維動作的網絡結構；

將輸入的所述目標風格動作特征通過所述動作生成網絡轉換為所述目標風格動作。

4.如權利要求1至3任一所述的方法，其特征在于，所述將所述目標動作特征與所述風格動作特征進行融合生成目標風格動作之后，還包括：

判斷所述目標風格動作是否存在異常現象，所述異常現象包括高頻抖動和關節異常滑動；

若所述目標風格動作存在所述異常現象，則觸發所述動作生成網絡重新生成所述目標風格動作；或者

若所述目標風格動作不存在所述異常現象，則輸出所述目標風格動作。

5.如權利要求4所述的方法，其特征在于，所述判斷所述目標風格動作是否存在異常現象，包括：

對所述目標風格動作進行傅里葉變換得到所述目標風格動作的頻域信息；

判斷所述目標風格動作的頻域信息中是否存在高于第一閾值的部分，其中所述高于第一閾值的部分對應所述目標風格動作的高頻抖動；

如果所述目標風格動作的頻域信息中存在高于第一閾值的部分，則判斷所述目標風格動作存在異常現象。

6.如權利要求4所述的方法，其特征在于，所述判斷所述目標風格動作是否存在異常現象，包括：

若所述目標風格動作包括接觸地面的動作，則在執行所述接觸地面的動作的時間段內，統計所述目標風格動作中關節相對于地面的位移，并將所述關節相對于地面的位移作為關節滑動分量，所述關節滑動分量用于指示所述目標風格動作中特定關節與地面之間的滑動關系；

判斷所述關節滑動分量是否高于第二閾值；

如果所述關節滑動分量高于第二閾值，則判斷所述目標風格動作存在異常現象。