[發明專利]視頻剪輯方法、裝置、設備及存儲介質

有效

• 申請號: 202010694551.8
• 申請日: 2020-07-17
• 公開（公告）號: CN111757149B
• 公開（公告）日: 2022-07-05
• 發明（設計）人: 饒安逸;徐霖寧;蔣學錕;黃青虬;周博磊;林達華
• 申請（專利權）人: 商湯集團有限公司
• 主分類號: H04N21/234
• 分類號: H04N21/234;H04N21/44;H04N21/235;H04N21/435
• 代理公司: 北京博思佳知識產權代理有限公司 11415
• 代理人: 董曉盈

公開了一種視頻剪輯方法、裝置、設備及存儲介質。所述方法包括：基于視頻流中的多個原始圖像，得到至少一個候選圖像集合，其中，每個候選圖像集合包括至少一個候選圖像；對所述至少一個候選圖像集合中每個候選圖像集合進行鏡頭分類處理，得到所述每個候選圖像集合的鏡頭分類結果；基于所述至少一個候選圖像集合的鏡頭分類結果，從所述至少一個候選圖像集合中選取目標圖像集合；基于所述目標圖像集合，得到所述視頻流的視頻剪輯結果。

技術領域

本公開涉及計算機視覺技術，尤其涉及一種視頻剪輯方法、裝置、設備及存儲介質。

背景技術

視頻剪輯在視頻制作中具有重要的作用，在視頻剪輯過程中，使用不同的鏡頭類型可以呈現不同的效果，傳遞出不同的情感。由于剪輯過程中鏡頭類型的調整需要消耗大量人力成本和時間成本，因此需要研究和開發更高效的視頻自動剪輯方法。

發明內容

本公開實施例提供了一種視頻剪輯方案。

根據本公開的一方面，提供一種視頻剪輯方法，所述方法包括：基于視頻流中的多個原始圖像，得到至少一個候選圖像集合，其中，每個候選圖像集合包括至少一個候選圖像；對所述至少一個候選圖像集合中每個候選圖像集合進行鏡頭分類處理，得到所述每個候選圖像集合的鏡頭分類結果；基于所述至少一個候選圖像集合的鏡頭分類結果，從所述至少一個候選圖像集合中選取目標圖像集合；基于所述目標圖像集合，得到所述視頻流的視頻剪輯結果。

結合本公開提供的任一實施方式，所述基于所述目標圖像集合，得到所述視頻流的視頻剪輯結果，包括：利用所述目標圖像集合中的至少一個候選圖像對所述多個原始圖像中的至少一個原始圖像進行替換處理，得到所述視頻流的視頻剪輯結果。

結合本公開提供的任一實施方式，所述基于所述目標圖像集合，得到所述視頻流的視頻剪輯結果，包括：對所述目標圖像集合和背景模板進行圖像合成處理，得到所述視頻流的視頻剪輯結果；或者對所述目標圖像集合和所述多個原始圖像進行圖像合成處理，得到所述視頻流的視頻剪輯結果。

結合本公開提供的任一實施方式，所述基于所述目標圖像集合，得到所述視頻流的視頻剪輯結果，包括：基于剪輯風格信息，對所述目標圖像集合進行視頻合成處理，得到所述視頻流的視頻剪輯結果。

結合本公開提供的任一實施方式，所述基于視頻流中的多個原始圖像，得到至少一個候選圖像集合，包括：通過對所述視頻流的多個原始圖像中至少一個原始圖像的處理，得到至少一個候選圖像集合；或者基于對所述視頻流的多個原始圖像中至少一個原始圖像的識別結果以及素材庫，得到至少一個候選圖像集合；或者通過對所述視頻流的多個原始圖像中至少一個原始圖像進行裁剪處理，得到至少一個候選圖像集合，其中，每個候選圖像集合包括通過同一裁剪方式對所述多個圖像中至少一個圖像進行處理得到的結果圖像。

結合本公開提供的任一實施方式，所述基于視頻流中的多個原始圖像，得到至少一個候選圖像集合，包括：根據所述多個原始圖像中每個原始圖像中所包含的主體對象的位置信息，對所述每個原始圖像進行多次裁剪處理，得到所述每個原始圖像的至少一個候選圖像。

結合本公開提供的任一實施方式，每個所述候選圖像包含所述主體對象的至少一部分。

結合本公開提供的任一實施方式，所述主體對象包括以下中的至少一項：說話主體、動作主體、目標人物。

結合本公開提供的任一實施方式，所述基于所述至少一個候選圖像集合的鏡頭分類結果，從所述至少一個候選圖像集合中選取目標圖像集合，包括：基于預設剪輯策略對應的目標鏡頭類別，從所述至少一個候選圖像集合中選取目標圖像集合；或者基于所述多個原始圖像對應的目標鏡頭類別，從所述至少一個候選圖像集合中選取目標圖像集合。