[發(fā)明專利]動捕數(shù)據(jù)的處理方法、裝置、設(shè)備及存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 202310318727.3
• 申請日: 2023-03-29
• 公開（公告）號: CN116051699B
• 公開（公告）日: 2023-06-02
• 發(fā)明（設(shè)計）人: 成慶榮;張保成;李卓;葛文浩;付星輝;孫鐘前
• 申請（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號: G06T13/40
• 分類號: G06T13/40;G06T7/00;G06T7/70
• 代理公司: 北京三高永信知識產(chǎn)權(quán)代理有限責(zé)任公司 11138
• 代理人: 張所明

本申請實施例公開了一種動捕數(shù)據(jù)的處理方法、裝置、設(shè)備及存儲介質(zhì)，屬于視頻動捕技術(shù)領(lǐng)域。該方法包括：對動作視頻中的目標(biāo)對象進(jìn)行動捕分析，得到原始視頻動捕數(shù)據(jù)；基于所述動作視頻，對所述目標(biāo)對象進(jìn)行腳接地狀態(tài)分析，得到各個視頻幀中所述目標(biāo)對象的腳接地數(shù)據(jù)；基于所述原始視頻動捕數(shù)據(jù)以及所述腳接地數(shù)據(jù)，確定所述原始視頻動捕數(shù)據(jù)的腳部穿模損失以及腳部滑步損失；基于所述腳部穿模損失以及所述腳部滑步損失，對所述原始視頻動捕數(shù)據(jù)進(jìn)行迭代優(yōu)化，得到所述目標(biāo)對象的目標(biāo)視頻動捕數(shù)據(jù)；采用本申請實施例提供的方法，能夠減少視頻動捕數(shù)據(jù)中存在的腳部穿模問題以及滑步問題，提高視頻動捕數(shù)據(jù)的質(zhì)量。

技術(shù)領(lǐng)域

本申請實施例涉及視頻動捕技術(shù)領(lǐng)域，特別涉及一種動捕數(shù)據(jù)的處理方法、裝置、設(shè)備及存儲介質(zhì)。

背景技術(shù)

人體運動捕捉技術(shù)能夠直接獲取人體的動作并且采用數(shù)字化方式表示，進(jìn)而應(yīng)用于其他領(lǐng)域。而視頻動作捕捉技術(shù)是其中成本最低的運動數(shù)據(jù)獲取方式，具有廣泛的應(yīng)用前景。

但是由于視頻中的平面運動數(shù)據(jù)和三維動作數(shù)據(jù)之間存在顯著的語義鴻溝，因而得到的動作數(shù)據(jù)廣泛存在瑕疵，比如腳部穿模問題和滑步問題，相關(guān)技術(shù)中，主要是通過動畫師對動作數(shù)據(jù)中存在的腳部穿模問題和滑步問題進(jìn)行后期修復(fù)，需要消耗大量的時間和費用，成本較高。

發(fā)明內(nèi)容

本申請實施例提供了一種動捕數(shù)據(jù)的處理方法、裝置、設(shè)備及存儲介質(zhì)，能夠提高視頻動捕數(shù)據(jù)的質(zhì)量，減少視頻動捕數(shù)據(jù)中存在的腳部穿模問題以及滑步問題。所述技術(shù)方案如下。

一方面，本申請實施例提供了一種動捕數(shù)據(jù)的處理方法，所述方法包括：

對動作視頻中的目標(biāo)對象進(jìn)行動捕分析，得到原始視頻動捕數(shù)據(jù)，所述原始視頻動捕數(shù)據(jù)包括各個視頻幀中所述目標(biāo)對象的全局位移數(shù)據(jù)以及骨骼旋轉(zhuǎn)數(shù)據(jù)，所述全局位移數(shù)據(jù)表征所述目標(biāo)對象的中心骨骼節(jié)點的位移情況；

基于所述動作視頻，對所述目標(biāo)對象進(jìn)行腳接地狀態(tài)分析，得到各個視頻幀中所述目標(biāo)對象的腳接地數(shù)據(jù)，所述腳接地數(shù)據(jù)表征所述目標(biāo)對象的腳部接地情況；

基于所述原始視頻動捕數(shù)據(jù)以及所述腳接地數(shù)據(jù)，確定所述原始視頻動捕數(shù)據(jù)的腳部穿模損失以及腳部滑步損失，其中，所述腳部穿模損失表征各個視頻幀中所述目標(biāo)對象的腳部陷地情況，所述腳部滑步損失表征所述目標(biāo)對象在腳接地狀態(tài)下的腳部滑動情況；

基于所述腳部穿模損失以及所述腳部滑步損失，對所述原始視頻動捕數(shù)據(jù)進(jìn)行迭代優(yōu)化，得到所述目標(biāo)對象的目標(biāo)視頻動捕數(shù)據(jù)。

另一方面，本申請實施例提供了一種動捕數(shù)據(jù)的處理裝置，所述裝置包括：

第一分析模塊，用于對動作視頻中的目標(biāo)對象進(jìn)行動捕分析，得到原始視頻動捕數(shù)據(jù)，所述原始視頻動捕數(shù)據(jù)包括各個視頻幀中所述目標(biāo)對象的全局位移數(shù)據(jù)以及骨骼旋轉(zhuǎn)數(shù)據(jù)，所述全局位移數(shù)據(jù)表征所述目標(biāo)對象的中心骨骼節(jié)點的位移情況；

第二分析模塊，用于基于所述動作視頻，對所述目標(biāo)對象進(jìn)行腳接地狀態(tài)分析，得到各個視頻幀中所述目標(biāo)對象的腳接地數(shù)據(jù)，所述腳接地數(shù)據(jù)表征所述目標(biāo)對象的腳部接地情況；

損失確定模塊，用于基于所述原始視頻動捕數(shù)據(jù)以及所述腳接地數(shù)據(jù)，確定所述原始視頻動捕數(shù)據(jù)的腳部穿模損失以及腳部滑步損失，其中，所述腳部穿模損失表征各個視頻幀中所述目標(biāo)對象的腳部陷地情況，所述腳部滑步損失表征所述目標(biāo)對象在腳接地狀態(tài)下的腳部滑動情況；

優(yōu)化模塊，用于基于所述腳部穿模損失以及所述腳部滑步損失，對所述原始視頻動捕數(shù)據(jù)進(jìn)行迭代優(yōu)化，得到所述目標(biāo)對象的目標(biāo)視頻動捕數(shù)據(jù)。

另一方面，本申請實施例提供了一種計算機(jī)設(shè)備，所述計算機(jī)設(shè)備包括處理器和存儲器，所述存儲器中存儲有至少一條指令，所述至少一條指令由所述處理器加載并執(zhí)行以實現(xiàn)如上述方面所述的動捕數(shù)據(jù)的處理方法。