[發(fā)明專利]一種虛擬對(duì)象舞蹈生成方法及計(jì)算機(jī)存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110901912.6
• 申請(qǐng)日: 2021-08-06
• 公開（公告）號(hào): CN113643442A
• 公開（公告）日: 2021-11-12
• 發(fā)明（設(shè)計(jì)）人: 許榮峰;李中冬;陳節(jié)省;劉旺;林劍宇
• 申請(qǐng)（專利權(quán)）人: 福建凱米網(wǎng)絡(luò)科技有限公司
• 主分類號(hào): G06T19/00
• 分類號(hào): G06T19/00;G06F16/683;G06F16/68;G10H1/36;G10H1/40
• 代理公司: 福州市景弘專利代理事務(wù)所(普通合伙) 35219
• 代理人: 張忠波;黃以琳

本發(fā)明涉及虛擬現(xiàn)實(shí)技術(shù)領(lǐng)域，公開了一種虛擬對(duì)象舞蹈生成方法及計(jì)算機(jī)存儲(chǔ)介質(zhì)，包括步驟：預(yù)設(shè)虛擬對(duì)象的舞蹈庫，舞蹈庫具有多個(gè)存儲(chǔ)單元，不同存儲(chǔ)單元對(duì)應(yīng)存儲(chǔ)不同肢體部位的舞蹈動(dòng)作；從音頻文件中獲取音樂元素，根據(jù)音樂元素從多個(gè)存儲(chǔ)單元中分別提取舞蹈動(dòng)作；按時(shí)間軸將不同肢體部位的所述舞蹈動(dòng)作進(jìn)行拼接形成所述虛擬對(duì)象的動(dòng)態(tài)舞蹈。本發(fā)明可根據(jù)音頻文件從舞蹈庫中提取虛擬對(duì)象的不同肢體部位的舞蹈動(dòng)作，從而能更好的配合音頻文件產(chǎn)生豐富和靈活的舞蹈視頻；通過不同肢體部位組合產(chǎn)生虛擬對(duì)象的舞蹈，可通過少量的肢體部位就可產(chǎn)生大量的舞蹈動(dòng)作，大大降低了人工和時(shí)間成本。

技術(shù)領(lǐng)域

本發(fā)明涉及虛擬現(xiàn)實(shí)技術(shù)領(lǐng)域，特別是涉及一種虛擬對(duì)象舞蹈生成方法及計(jì)算機(jī)存儲(chǔ)介質(zhì)。

背景技術(shù)

隨著虛擬現(xiàn)實(shí)技術(shù)的發(fā)展，虛擬的三維對(duì)象也越來越多的被應(yīng)用于音樂的視頻中，在視頻中通過虛擬三維對(duì)象為音樂配舞。

目前虛擬三維對(duì)象的舞蹈動(dòng)作主要可通過以下幾種方案實(shí)現(xiàn)：

方案一：為每一首音樂獨(dú)設(shè)計(jì)虛擬三維對(duì)象并錄制該虛擬三維對(duì)象的舞蹈動(dòng)作。

方案二：設(shè)計(jì)、錄制虛擬三維對(duì)象的簡(jiǎn)短的舞蹈動(dòng)作片段，根據(jù)音樂隨機(jī)組合舞蹈動(dòng)作片段，從而組成一首完整歌曲的舞蹈動(dòng)作。

其中，在方案一中需要消耗大量的人工成本、時(shí)間成本來設(shè)計(jì)、錄制和精修虛擬三維對(duì)象的舞蹈動(dòng)作，因此效率十分低下。在方案二中每段舞蹈動(dòng)作片段都是獨(dú)立的，且動(dòng)作之間銜接僵硬，舞蹈動(dòng)作重復(fù)度高，無法大范圍走動(dòng)，并且無法貼合歌曲中的音樂節(jié)奏。且為了豐富舞蹈動(dòng)作還必須大量設(shè)計(jì)錄制精修舞蹈動(dòng)作，同樣需要消耗大量的人工成本、時(shí)間成本。

發(fā)明內(nèi)容

為此，需要提供一種虛擬對(duì)象舞蹈生成方法，用于解決上述虛擬三維對(duì)象舞蹈制作成本高，以及與歌曲配合不佳的技術(shù)問題。

為實(shí)現(xiàn)上述目的，發(fā)明人提供了一種虛擬對(duì)象舞蹈生成方法，包括以下步驟：

預(yù)設(shè)虛擬對(duì)象的舞蹈庫，所述舞蹈庫具有多個(gè)存儲(chǔ)單元，不同所述存儲(chǔ)單元對(duì)應(yīng)存儲(chǔ)所述虛擬對(duì)象的不同肢體部位的舞蹈動(dòng)作；

從音頻文件中獲取音樂元素，根據(jù)所述音樂元素從多個(gè)所述存儲(chǔ)單元中分別提取所述舞蹈動(dòng)作，所述音樂元素包括曲風(fēng)、節(jié)奏、情感中的任意一種；

按時(shí)間軸將不同肢體部位的所述舞蹈動(dòng)作進(jìn)行拼接形成所述虛擬對(duì)象的動(dòng)態(tài)舞蹈。

進(jìn)一步的，所述“從音頻文件中獲取音樂元素，根據(jù)所述音樂元素從多個(gè)所述存儲(chǔ)單元中分別提取所述舞蹈動(dòng)作”包括步驟：

對(duì)所述音頻文件進(jìn)行分段，所述分段包括起始段、高潮段、純伴奏段、結(jié)尾段中的任意一種或多種，或所述音頻文件按每句歌詞進(jìn)行分段；

分別從所述分段中提取音樂元素，根據(jù)各分段的所述音樂元素從多個(gè)所述存儲(chǔ)單元中分別提取所述舞蹈動(dòng)作；

所述“按時(shí)間軸將不同肢體部位的所述舞蹈動(dòng)作進(jìn)行拼接形成所述虛擬對(duì)象的動(dòng)態(tài)舞蹈”包括步驟：

按所述分段在所述時(shí)間軸上，將各所述分段對(duì)應(yīng)的所述舞蹈動(dòng)進(jìn)行拼接形成所述虛擬對(duì)象的動(dòng)態(tài)舞蹈。

進(jìn)一步的，其還包括：接收觀眾反饋結(jié)果，根據(jù)觀眾反饋結(jié)果重新提取音頻剩余分段對(duì)應(yīng)的舞蹈動(dòng)作，將重新提取的舞蹈動(dòng)進(jìn)行拼接形成所述虛擬對(duì)象的動(dòng)態(tài)舞蹈。

進(jìn)一步的，所述存儲(chǔ)單元包括兩個(gè)以上的子存儲(chǔ)單元，根據(jù)所述舞蹈動(dòng)作的特征對(duì)所述舞蹈動(dòng)作進(jìn)行分類，并對(duì)應(yīng)存儲(chǔ)于不同的所述子存儲(chǔ)單元內(nèi)，所述舞蹈動(dòng)作的特征包括動(dòng)作風(fēng)格、動(dòng)作節(jié)拍或動(dòng)作類型。

進(jìn)一步的，還包括步驟：

獲取同一肢體部位的當(dāng)前舞蹈動(dòng)作的尾幀圖像和相鄰的下一舞蹈動(dòng)作的首幀圖像；