[發明專利]一種視頻畫幅裁剪方法及裝置

在審

• 申請號: 202110704744.1
• 申請日: 2021-06-24
• 公開（公告）號: CN113436072A
• 公開（公告）日: 2021-09-24
• 發明（設計）人: 譚嵩;羅準;張東陽;吳堅強;馮斌
• 申請（專利權）人: 湖南快樂陽光互動娛樂傳媒有限公司
• 主分類號: G06T3/40
• 分類號: G06T3/40;G06T7/10;G06T7/66;G06K9/46
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 李慧引

本申請公開了一種視頻畫幅裁剪方法及裝置，其中，所述方法包括：將待處理視頻分割為多個場景片段；其中，每個場景片段由多幀包含相同場景畫面的圖像組成；分別檢測出每個場景片段的首幀圖像中的顯著性對象；針對每個場景片段，確定顯著性對象在場景片段的每幀圖像中的坐標參數；利用跟蹤到的每幀圖像中的顯著性對象的坐標參數，計算得到每幀圖像對應的重心坐標；其中，坐標參數至少包括顯著性對象對應的左右邊界坐標以及顯著性對象對應的上下邊界坐標；針對每幀圖像，以圖像對應的重心坐標所處位置為基準點，將每幀圖像的尺寸調整至目標寬高比進行裁剪，從而可以有效保證裁剪后的圖像中包含有主體內容。

技術領域

本申請涉及畫幅裁剪技術領域，特別涉及一種視頻畫幅裁剪方法及裝置。

背景技術

標準制作的視頻的畫幅的寬高比一般為16:9、4:3或21:9。但隨著視頻播放終端設備的和終端播放形式的不斷增加，出現了18:9、19:9、3:2等寬高比的顯示屏的寬屏收集或平板電腦，以及豎屏播放等形式，從而會出現視頻源和顯示屏的畫幅不匹配的情況，進而導致播放效果不佳。

為了解決視頻源和顯示屏的畫幅不匹配的情況，現今通常會通過機器裁剪或人工裁剪的方式，將視頻源的畫幅裁剪為需要輸出的目標寬高比。但是由于人工裁剪存在效率低，成本高等問題。所以現今主要采用機器裁剪的方式進行采集。現今的機器裁剪的方式，主要是基于圖像中的某個區域坐標，裁剪出目標寬高比的固定區域。

但是，由于機器裁剪只能以取某個區域的坐標的固定規則來裁剪，缺乏對視頻內容的識別和裁剪的自適應判斷能力，所以容易出現主體內容脫離裁剪窗口的情況，從而導致裁剪出的圖像中不包含有原本圖像中的主體內容，即視頻中主觀感興趣的關鍵人物或物體對象被裁剪掉，影響裁剪后視頻的播放效果。

發明內容

基于上述現有技術的不足，本申請提供了一種視頻畫幅裁剪方法及裝置，以解決現有的裁剪方法容易出現主體內容脫離裁剪窗口的問題。

為了實現上述目的，本申請提供了以下技術方案：

本申請第一方面提供了一種視頻畫幅裁剪方法，包括：

將待處理視頻分割為多個場景片段；其中，每個所述場景片段由多幀包含相同場景畫面的圖像組成；

分別檢測出每個所述場景片段的首幀圖像中的顯著性對象；

針對每個所述場景片段，確定所述顯著性對象在所述場景片段的每幀圖像中的坐標參數；其中，所述坐標參數至少包括顯著性對象對應的左右邊界坐標以及顯著性對象對應的上下邊界坐標；

利用跟蹤到的每幀所述圖像中的顯著性對象的坐標參數，計算得到每幀所述圖像對應的重心坐標；

針對每幀所述圖像，以所述圖像對應的重心坐標所處位置為基準點，將每幀所述圖像的尺寸調整至目標寬高比進行裁剪。

可選地，在上述的方法中，所述利用跟蹤到的每幀所述圖像中的顯著性對象的坐標參數，計算得到每幀所述圖像對應的重心坐標之后，還包括：

對每幀所述圖像對應的重心坐標進行時序平滑處理，得到處理后的每幀所述對應的重心坐標；

其中，所述針對每幀所述圖像，以所述圖像對應的重心坐標所處位置為基準點，將每幀所述圖像的尺寸調整至目標寬高比進行裁剪，包括：

針對每幀所述圖像，以處理后的所述圖像對應的重心坐標所處位置為基準點，將每幀所述圖像的尺寸調整至目標寬高比進行裁剪。

可選地，在上述的方法中，所述對每幀所述圖像對應的重心坐標進行時序平滑處理，得到處理后的每幀所述對應的重心坐標，包括：