[發(fā)明專利]視頻生成方法、裝置、設(shè)備、存儲(chǔ)介質(zhì)及程序產(chǎn)品

在審

• 申請(qǐng)?zhí)枺?/td>: 202111371809.1
• 申請(qǐng)日: 2021-11-18
• 公開(kāi)（公告）號(hào): CN116137672A
• 公開(kāi)（公告）日: 2023-05-19
• 發(fā)明（設(shè)計(jì)）人: 靳瀟杰;宮偉博;黃權(quán)偉;沈曉輝
• 申請(qǐng)（專利權(quán)）人: 臉萌有限公司
• 主分類號(hào): H04N21/44
• 分類號(hào): H04N21/44;H04N21/439
• 代理公司: 上海光柵知識(shí)產(chǎn)權(quán)代理有限公司 31340
• 代理人: 關(guān)浩;馬雯雯

1.一種視頻生成方法，其特征在于，包括：

獲取至少兩段視頻；

確定所述至少兩段視頻對(duì)應(yīng)的特征信息；

根據(jù)所述特征信息和預(yù)先存儲(chǔ)的多個(gè)渲染效果，確定待添加效果組合；所述渲染效果為動(dòng)畫(huà)、特效或轉(zhuǎn)場(chǎng)；

根據(jù)所述至少兩段視頻和所述待添加效果組合，生成目標(biāo)視頻。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述至少兩段視頻對(duì)應(yīng)的特征信息包括以下至少一種：

每段視頻對(duì)應(yīng)的視頻局部特征，所述視頻局部特征包括視頻沖擊力、視頻運(yùn)動(dòng)快慢、視頻入方向或視頻出方向中的至少一種；

所述至少兩段視頻對(duì)應(yīng)的視頻類型；

從所述至少兩段視頻中提取的至少兩幀圖像的第一全局特征和第一局部特征，所述第一全局特征包括圖像情緒、圖像風(fēng)格、圖像場(chǎng)景中的至少一種，所述第一局部特征包括每幀圖像對(duì)應(yīng)的局部特征，所述每幀圖像對(duì)應(yīng)的局部特征包括圖像情緒、圖像風(fēng)格、圖像場(chǎng)景中的至少一種；

與所述至少兩段視頻匹配的音樂(lè)的第二全局特征和第二局部特征，所述第二全局特征包括音樂(lè)情緒、音樂(lè)曲風(fēng)或音樂(lè)主題中的至少一種，所述第二局部特征包括所述音樂(lè)中每個(gè)段視頻對(duì)應(yīng)的音樂(lè)片段的副歌點(diǎn)、樂(lè)句樂(lè)段點(diǎn)和節(jié)拍點(diǎn)中的至少一種。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，確定所述每段視頻對(duì)應(yīng)的視頻局部特征，包括：

采用視頻特征提取模型，分別對(duì)所述至少兩段視頻進(jìn)行特征提取，得到每段視頻對(duì)應(yīng)的視頻局部特征。

4.根據(jù)權(quán)利要求2所述的方法，其特征在于，確定所述至少兩段視頻對(duì)應(yīng)的視頻類型，包括：

響應(yīng)于對(duì)至少一個(gè)預(yù)設(shè)視頻類型中目標(biāo)視頻類型的選擇操作，將所述目標(biāo)視頻類型確定為所述至少兩段視頻對(duì)應(yīng)的視頻類型。

5.根據(jù)權(quán)利要求2所述的方法，其特征在于，確定從所述至少兩段視頻中提取的至少兩幀圖像的第一全局特征和第一局部特征，包括：

對(duì)所述至少兩段視頻進(jìn)行抽幀處理，得到所述至少兩幀圖像；

采用預(yù)先存儲(chǔ)的圖像特征提取模型，對(duì)所述至少兩幀圖像進(jìn)行特征提取，得到所述第一全局特征和所述第一局部特征。

6.根據(jù)權(quán)利要求2所述的方法，其特征在于，確定與所述至少兩幀圖像匹配的音樂(lè)的第二全局特征和第二局部特征，包括：

采用預(yù)先存儲(chǔ)的配樂(lè)算法，對(duì)所述音樂(lè)進(jìn)行特征提取，得到所述第二全局特征和第二局部特征。

7.根據(jù)權(quán)利要求2-6任一項(xiàng)所述的方法，其特征在于，所述特征信息中包括：每段視頻對(duì)應(yīng)的視頻局部特征、視頻類型、所述第一全局特征、所述第一局部特征、所述第二全局特征和所述第二局部特征；

所述根據(jù)所述特征信息和預(yù)先存儲(chǔ)的多個(gè)渲染效果，確定待添加效果組合，包括：

根據(jù)所述第一全局特征和所述第二全局特征，對(duì)所述多個(gè)渲染效果進(jìn)行全局過(guò)濾篩選處理，得到多個(gè)第一待選效果；

對(duì)所述多個(gè)第一待選效果進(jìn)行類型匹配篩選處理，得到與所述視頻類型匹配的多個(gè)第二待選效果；

針對(duì)所述每段視頻，根據(jù)所述第一局部特征中所述視頻對(duì)應(yīng)的圖像的局部特征，對(duì)所述多個(gè)第二待選效果進(jìn)行局部過(guò)濾篩選處理，得到多個(gè)第三待選效果，并根據(jù)所述視頻對(duì)應(yīng)的視頻局部特征，確定所述多個(gè)第三待選效果在所述視頻下各自對(duì)應(yīng)的屬性得分，將所述多個(gè)第三待選效果中屬性得分大于或等于第一閾值的效果，確定為所述視頻對(duì)應(yīng)的至少一個(gè)第四待選效果；

根據(jù)所述每段視頻各自對(duì)應(yīng)的至少一個(gè)第四待選效果，確定所述至少一個(gè)渲染組合；

根據(jù)所述第一局部特征、所述第二局部特征和所述至少一個(gè)渲染組合，確定所述待添加效果組合。