[發明專利]裁剪視頻的方法、裝置、設備以及存儲介質

有效

• 申請號: 202011061772.8
• 申請日: 2020-09-30
• 公開（公告）號: CN112188283B
• 公開（公告）日: 2022-11-15
• 發明（設計）人: 吳昊;馬云濤;王長虎
• 申請（專利權）人: 北京字節跳動網絡技術有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44;H04N21/4402
• 代理公司: 北京知帆遠景知識產權代理有限公司 11890
• 代理人: 劉繼昂

1.一種裁剪視頻的方法，其特征在于，包括：

獲取第一圖像幀的至少一個檢測框，所述至少一個檢測框中每一個檢測框的尺寸為所述第一圖像幀的裁剪尺寸；

根據所述至少一個檢測框中的任意一個檢測框的重要性得分、覆蓋面積以及平滑距離，確定所述檢測框的代價；

其中，所述重要性得分用于表征所述檢測框在所述第一圖像幀中的重要程度，所述覆蓋面積用于表征所述檢測框和所述第一圖像幀中的文本框的重疊面積，所述平滑距離用于表征所述檢測框和所述第一圖像幀的上一個圖像幀的裁剪框之間的距離；

將所述至少一個檢測框中代價最小的第一檢測框確定為裁剪框；

基于所述裁剪框裁剪所述第一圖像幀；

所述方法還包括：

通過顯著性檢測和/或人臉檢測的方式，獲取所述檢測框的重要性得分。

2.根據權利要求1所述的方法，其特征在于，所述根據所述至少一個檢測框中的任意一個檢測框的重要性得分、覆蓋面積以及平滑距離，確定所述檢測框的代價，包括：

基于所述檢測框的重要性得分確定所述檢測框的重要性代價；

其中，所述檢測框的重要性代價隨所述檢測框的重要性得分的增加而減小；所述檢測框的代價包括所述檢測框的重要性代價。

3.根據權利要求2所述的方法，其特征在于，所述基于所述檢測框的重要性得分確定所述檢測框的重要性代價，包括：

確定所述檢測框的第一比值，所述第一比值為所述檢測框的重要性得分和所述第一圖像幀的重要性得分的比值；

基于所述檢測框的第一比值確定所述檢測框的重要性代價，所述檢測框的重要性代價隨所述檢測框的第一比值的增加而減小。

4.根據權利要求2所述的方法，其特征在于，所述基于所述檢測框的重要性得分確定所述檢測框的重要性代價，包括：

確定所述檢測框的至少一個比值，所述檢測框的至少一個比值包括所述檢測框的重要性得分分別相對所述上一個圖像幀中的每一個檢測框的重要性得分的比值；

基于所述檢測框的至少一個比值，確定所述檢測框的重要性代價，所述檢測框的重要性代價隨所述至少一個比值中的比值的增加而減小。

5.根據權利要求1所述的方法，其特征在于，所述根據所述至少一個檢測框中的任意一個檢測框的重要性得分、覆蓋面積以及平滑距離，確定所述檢測框的代價，包括：

基于所述檢測框和所述文本框的重疊面積，確定所述檢測框的覆蓋代價；

其中，所述檢測框對應的覆蓋代價隨所述檢測框的覆蓋面積的增加先減小后增加；所述檢測框的代價包括所述檢測框的覆蓋代價。

6.根據權利要求5所述的方法，其特征在于，所述文本框中包括所述第一圖像中的文字或商標所在的區域。

7.根據權利要求1所述的方法，其特征在于，所述根據所述至少一個檢測框中的任意一個檢測框的重要性得分、覆蓋面積以及平滑距離，確定所述檢測框的代價，包括：

基于所述檢測框的距離比值確定所述檢測框的距離代價；

其中，所述檢測框的距離比值為所述檢測框的平滑距離與第一長度的比值，所述第一長度為所述第一圖像幀的與第一連線平行的邊長，所述第一連線為所述檢測框和所述上一個圖像幀的裁剪框形成的連線，所述檢測框的距離代價隨所述檢測框的距離比值的增加而增加；所述檢測框的代價包括所述檢測框的距離代價。

8.根據權利要求1至7中任一項所述的方法，其特征在于，所述第一圖像幀為經過去除邊框或經過模糊處理的圖像幀。

9.根據權利要求1至7中任一項所述的方法，其特征在于，所述方法還包括：

平滑或插值處理裁剪后的圖像幀。