[發(fā)明專利]一種視頻畫幅裁剪方法及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 202110704744.1
• 申請(qǐng)日: 2021-06-24
• 公開（公告）號(hào): CN113436072A
• 公開（公告）日: 2021-09-24
• 發(fā)明（設(shè)計(jì)）人: 譚嵩;羅準(zhǔn);張東陽;吳堅(jiān)強(qiáng);馮斌
• 申請(qǐng)（專利權(quán)）人: 湖南快樂陽光互動(dòng)娛樂傳媒有限公司
• 主分類號(hào): G06T3/40
• 分類號(hào): G06T3/40;G06T7/10;G06T7/66;G06K9/46
• 代理公司: 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司 11227
• 代理人: 李慧引

1.一種視頻畫幅裁剪方法，其特征在于，包括：

將待處理視頻分割為多個(gè)場景片段；其中，每個(gè)所述場景片段由多幀包含相同場景畫面的圖像組成；

分別檢測出每個(gè)所述場景片段的首幀圖像中的顯著性對(duì)象；

針對(duì)每個(gè)所述場景片段，確定所述顯著性對(duì)象在所述場景片段的每幀圖像中的坐標(biāo)參數(shù)；其中，所述坐標(biāo)參數(shù)至少包括顯著性對(duì)象對(duì)應(yīng)的左右邊界坐標(biāo)以及顯著性對(duì)象對(duì)應(yīng)的上下邊界坐標(biāo)；

利用跟蹤到的每幀所述圖像中的顯著性對(duì)象的坐標(biāo)參數(shù)，計(jì)算得到每幀所述圖像對(duì)應(yīng)的重心坐標(biāo)；

針對(duì)每幀所述圖像，以所述圖像對(duì)應(yīng)的重心坐標(biāo)所處位置為基準(zhǔn)點(diǎn)，將每幀所述圖像的尺寸調(diào)整至目標(biāo)寬高比進(jìn)行裁剪。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述利用跟蹤到的每幀所述圖像中的顯著性對(duì)象的坐標(biāo)參數(shù)，計(jì)算得到每幀所述圖像對(duì)應(yīng)的重心坐標(biāo)之后，還包括：

對(duì)每幀所述圖像對(duì)應(yīng)的重心坐標(biāo)進(jìn)行時(shí)序平滑處理，得到處理后的每幀所述對(duì)應(yīng)的重心坐標(biāo)；

其中，所述針對(duì)每幀所述圖像，以所述圖像對(duì)應(yīng)的重心坐標(biāo)所處位置為基準(zhǔn)點(diǎn)，將每幀所述圖像的尺寸調(diào)整至目標(biāo)寬高比進(jìn)行裁剪，包括：

針對(duì)每幀所述圖像，以處理后的所述圖像對(duì)應(yīng)的重心坐標(biāo)所處位置為基準(zhǔn)點(diǎn)，將每幀所述圖像的尺寸調(diào)整至目標(biāo)寬高比進(jìn)行裁剪。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述對(duì)每幀所述圖像對(duì)應(yīng)的重心坐標(biāo)進(jìn)行時(shí)序平滑處理，得到處理后的每幀所述對(duì)應(yīng)的重心坐標(biāo)，包括：

確定出每幀所述圖像對(duì)應(yīng)的目標(biāo)圖像；其中，一幀所述圖像及其對(duì)應(yīng)的目標(biāo)圖像屬于同一所述場景片段，且對(duì)應(yīng)的時(shí)間戳是連續(xù)；一幀所述圖像對(duì)應(yīng)的目標(biāo)幀包括位于所述圖像前的N幀圖像，以及位于所述圖像后的N幀圖像；

計(jì)算每幀所述圖像對(duì)應(yīng)的重心坐標(biāo)的橫坐標(biāo)，與其對(duì)應(yīng)的各幀所述目標(biāo)圖像對(duì)應(yīng)的重心坐標(biāo)的橫坐標(biāo)的均值，以及計(jì)算每幀所述圖像對(duì)應(yīng)的重心坐標(biāo)的縱坐標(biāo)，與其對(duì)應(yīng)的各幀所述目標(biāo)圖像對(duì)應(yīng)的重心坐標(biāo)的縱坐標(biāo)的均值，得到處理后的每幀所述圖像對(duì)應(yīng)的重心坐標(biāo)。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將待處理視頻分割為多個(gè)場景片段，包括：

通過場景變換算法檢測出所述待處理視頻中發(fā)生場景畫面切換的各個(gè)時(shí)間戳；

從各個(gè)所述時(shí)間戳對(duì)應(yīng)的位置對(duì)所述待處理視頻進(jìn)行分割，得到多個(gè)場景片段。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述針對(duì)每個(gè)所述場景片段，確定所述顯著性對(duì)象在所述場景片段的每幀圖像中的坐標(biāo)參數(shù)，包括：

分別針對(duì)每個(gè)所述場景片段，以所述場景片段的首幀圖像中的顯著性對(duì)象作為跟蹤對(duì)象；

以所述場景片段的首幀圖像為起始圖像，逐幀檢測所述場景片段的每幀圖像中的所述跟蹤對(duì)象的坐標(biāo)參數(shù)。

6.一種視頻畫幅裁剪裝置，其特征在于，包括：

分割單元，用于將待處理視頻分割為多個(gè)場景片段；其中，每個(gè)所述場景片段由多幀包含相同場景畫面的圖像組成；

對(duì)象檢測單元，用于分別檢測出每個(gè)所述場景片段的首幀圖像中的顯著性對(duì)象；

跟蹤單元，用于針對(duì)每個(gè)所述場景片段，確定所述顯著性對(duì)象在所述場景片段的每幀圖像中的坐標(biāo)參數(shù)；其中，所述坐標(biāo)參數(shù)至少包括顯著性對(duì)象對(duì)應(yīng)的左右邊界坐標(biāo)以及顯著性對(duì)象對(duì)應(yīng)的上下邊界坐標(biāo)；

坐標(biāo)確定單元，用于利用跟蹤到的每幀所述圖像中的顯著性對(duì)象的坐標(biāo)參數(shù)，計(jì)算得到每幀所述圖像對(duì)應(yīng)的重心坐標(biāo)；

裁剪單元，用于針對(duì)每幀所述圖像，以所述圖像對(duì)應(yīng)的重心坐標(biāo)所處位置為基準(zhǔn)點(diǎn)，將每幀所述圖像的尺寸調(diào)整至目標(biāo)寬高比進(jìn)行裁剪。

7.根據(jù)權(quán)利要求6所述的裝置，其特征在于，還包括：

平滑處理單元，用于對(duì)每幀所述圖像對(duì)應(yīng)的重心坐標(biāo)進(jìn)行時(shí)序平滑處理，得到處理后的每幀所述對(duì)應(yīng)的重心坐標(biāo)；

其中，所述裁剪單元執(zhí)行所述針對(duì)每幀所述圖像，以所述圖像對(duì)應(yīng)的重心坐標(biāo)所處位置為基準(zhǔn)點(diǎn)，將每幀所述圖像的尺寸調(diào)整至目標(biāo)寬高比進(jìn)行裁剪時(shí)，用于：

針對(duì)每幀所述圖像，以處理后的所述圖像對(duì)應(yīng)的重心坐標(biāo)所處位置為基準(zhǔn)點(diǎn)，將每幀所述圖像的尺寸調(diào)整至目標(biāo)寬高比進(jìn)行裁剪。