[發(fā)明專利]一種視頻合成方法及裝置

有效

• 申請?zhí)枺?/td>: 201910283670.1
• 申請日: 2019-04-09
• 公開（公告）號: CN111800663B
• 公開（公告）日: 2023-09-05
• 發(fā)明（設(shè)計）人: 鄒娟
• 申請（專利權(quán)）人: 阿里巴巴集團控股有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44;H04N21/4402;G06V40/16
• 代理公司: 北京清源匯知識產(chǎn)權(quán)代理事務(wù)所(特殊普通合伙) 11644
• 代理人: 馮德魁;竇曉慧

本申請?zhí)峁┮环N視頻合成方法及裝置。其中，所述視頻合成方法，包括：根據(jù)原始視頻材料，獲得包含目標人物的人物軌道數(shù)據(jù)；根據(jù)對目標人物的視覺要求，針對所述人物軌道數(shù)據(jù)中的原始時間線進行優(yōu)化處理，獲得優(yōu)化后的目標人物素材的時間線；根據(jù)所述優(yōu)化后的目標人物素材的時間線，合成相關(guān)素材，獲得目標視頻。采用本申請?zhí)峁┑姆椒ǎ鉀Q了現(xiàn)有技術(shù)中，由于忽略對于人物素材的視覺要求，從而導致在合成的目標視頻中，人物素材的視覺體驗不佳的問題。

技術(shù)領(lǐng)域

本申請涉及視頻處理領(lǐng)域，具體涉及一種視頻合成方法及裝置。

背景技術(shù)

當前，業(yè)界的視頻剪輯產(chǎn)品或服務(wù)可以基于視頻、音頻、圖片、文本等進行視頻剪輯操作，完成視頻創(chuàng)作過程。其中，很多視頻創(chuàng)作會涉及到人物素材，需要針對人物素材進行各種剪輯與特效制作，并進行合成。視頻剪輯，一般指對音視圖文等素材進行非線性編輯的過程。通過對這些素材進行切割、合并、轉(zhuǎn)場、特效等二次編碼，生成具有不同表現(xiàn)力的新視頻。

現(xiàn)有技術(shù)中，完全根據(jù)目標人物素材的時間線的傳入直接進行視頻合成，時間線(Timeline)，是指將視頻素材按照視頻創(chuàng)意進行編排和特效設(shè)計的產(chǎn)物。上述現(xiàn)有技術(shù)中，忽略了對于人物素材的視覺要求，從而導致合成的目標視頻中，人物素材的視覺體驗不佳。

發(fā)明內(nèi)容

本申請?zhí)峁┮环N視頻合成方法及裝置，以解決現(xiàn)有技術(shù)中，完全根據(jù)待合成視頻中人物素材的時間線的傳入直接進行視頻合成，忽略了對于人物素材的視覺要求，從而導致在合成的目標視頻中，人物素材的視覺體驗不佳的問題。

本申請?zhí)峁┮环N視頻合成方法，包括：

根據(jù)原始視頻材料，獲得包含目標人物的人物軌道數(shù)據(jù)；

根據(jù)對目標人物的視覺要求，針對所述人物軌道數(shù)據(jù)中的原始時間線進行優(yōu)化處理，獲得優(yōu)化后的目標人物素材的時間線；

根據(jù)所述優(yōu)化后的目標人物素材的時間線，合成相關(guān)素材，獲得目標視頻。

可選的，所述根據(jù)原始視頻材料，獲得包含目標人物的人物軌道數(shù)據(jù)，包括：

獲取原始視頻材料；

針對所述原始視頻材料中的人物進行人臉識別，獲得人臉出現(xiàn)的時間數(shù)據(jù)、人臉占據(jù)視頻畫面的區(qū)域數(shù)據(jù)以及人物元數(shù)據(jù)；

根據(jù)所述時間數(shù)據(jù)、所述人臉占據(jù)視頻畫面的區(qū)域數(shù)據(jù)以及所述人物元數(shù)據(jù)，獲得包含目標人物的人物軌道數(shù)據(jù)。

可選的，所述針對所述人物軌道數(shù)據(jù)中的原始時間線進行優(yōu)化處理，獲得優(yōu)化后的目標人物素材的時間線，包括：

獲取所述目標視頻的視頻合成規(guī)則；

根據(jù)所述視頻合成規(guī)則，將所述原始時間線進行分軌處理，獲得優(yōu)化后的目標人物素材的時間線。

可選的，所述目標視頻的視頻合成規(guī)則包括如下規(guī)則中的至少一種：

按照人物的不同進行視頻合成；

按照景別的不同進行視頻合成；

按照拍攝方式的不同進行視頻合成。

可選的，所述根據(jù)所述視頻合成規(guī)則，將所述原始時間線進行分軌處理，包括：

根據(jù)所述合成規(guī)則，獲得所述原始時間線的軌道；

其中，所述原始時間線的每個軌道，分別對應(yīng)所述合成規(guī)則的一種情況。

可選的，所述針對所述人物軌道數(shù)據(jù)中的原始時間線進行優(yōu)化處理，獲得優(yōu)化后的目標人物素材的時間線，包括：

針對人物素材的特效渲染進行回歸處理，獲得優(yōu)化后的人物素材的時間線。