[發(fā)明專利]視頻處理方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)

在審

• 申請?zhí)枺?/td>: 202210200169.6
• 申請日: 2022-03-02
• 公開（公告）號(hào): CN114677619A
• 公開（公告）日: 2022-06-28
• 發(fā)明（設(shè)計(jì)）人: 陳聰
• 申請（專利權(quán)）人: 海寧奕斯偉集成電路設(shè)計(jì)有限公司;北京奕斯偉計(jì)算技術(shù)有限公司
• 主分類號(hào): G06V20/40
• 分類號(hào): G06V20/40;G06K9/62;H04N21/234;H04N21/44;G06V10/774
• 代理公司: 北京市立方律師事務(wù)所 11330
• 代理人: 張?bào)銓?/td>

1.一種視頻處理方法，其特征在于，包括：

獲取待處理的視頻數(shù)據(jù)，從所述視頻數(shù)據(jù)中獲取至少一個(gè)圖像集；所述圖像集包括至少兩個(gè)連續(xù)幀圖像；

從所述連續(xù)幀圖像中確定關(guān)鍵編碼幀，并確定所述關(guān)鍵編碼幀的場景類別；

基于所述場景類別，確定所述視頻數(shù)據(jù)的剪輯點(diǎn)；

根據(jù)所述剪輯點(diǎn)，對(duì)所述視頻數(shù)據(jù)進(jìn)行剪輯。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述從所述連續(xù)幀圖像中確定關(guān)鍵編碼幀，并確定所述關(guān)鍵編碼幀的場景類別，包括：

將所述連續(xù)幀圖像中的起始幀設(shè)為所述關(guān)鍵編碼幀；

基于預(yù)訓(xùn)練的目標(biāo)識(shí)別器對(duì)所述關(guān)鍵編碼幀進(jìn)行識(shí)別，得到所述關(guān)鍵編碼幀的場景類別。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述目標(biāo)識(shí)別器是基于如下方式訓(xùn)練得到的：

獲取預(yù)設(shè)訓(xùn)練集；其中，所述訓(xùn)練集包括幀圖像樣本和所述幀圖像樣本對(duì)應(yīng)的場景類別樣本；

將所述訓(xùn)練集輸入預(yù)設(shè)的初始識(shí)別器，得到所述幀圖像樣本對(duì)應(yīng)的類別標(biāo)簽；

基于所述場景類別樣本和所述類別標(biāo)簽的差值確定損失函數(shù)；

基于所述損失函數(shù)對(duì)所述初始識(shí)別器的參數(shù)進(jìn)行調(diào)整，直至所述損失函數(shù)符合預(yù)設(shè)收斂條件，得到所述目標(biāo)識(shí)別器。

4.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述剪輯點(diǎn)包括起始剪輯點(diǎn)和終止剪輯點(diǎn)；

所述基于所述場景類別，確定所述視頻數(shù)據(jù)的剪輯點(diǎn)，包括：

接收待刪除的目標(biāo)場景類別；

將所述場景類別為目標(biāo)場景類別的關(guān)鍵編碼幀，作為目標(biāo)幀；

將時(shí)序最小的目標(biāo)幀作為起始剪輯點(diǎn)；

根據(jù)時(shí)序最大的目標(biāo)幀確定終止剪輯點(diǎn)。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述根據(jù)時(shí)序最大的目標(biāo)幀確定終止剪輯點(diǎn)，包括：

將時(shí)序最大的目標(biāo)幀作為定位幀；

確定所述定位幀對(duì)應(yīng)的目標(biāo)圖像集；

將所述目標(biāo)圖像集中的結(jié)束幀作為終止剪輯點(diǎn)。

6.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述根據(jù)所述剪輯點(diǎn)，對(duì)所述視頻數(shù)據(jù)進(jìn)行剪輯，包括：

將所述視頻數(shù)據(jù)分解為對(duì)應(yīng)的圖像數(shù)據(jù)和音頻數(shù)據(jù)；

基于所述剪輯點(diǎn)分別對(duì)所述圖像數(shù)據(jù)和所述音頻數(shù)據(jù)進(jìn)行剪輯，得到目標(biāo)圖像數(shù)據(jù)和目標(biāo)音頻數(shù)據(jù)；

對(duì)所述目標(biāo)圖像數(shù)據(jù)和所述目標(biāo)音頻數(shù)據(jù)進(jìn)行封裝，生成目標(biāo)視頻數(shù)據(jù)。

7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述基于所述剪輯點(diǎn)分別對(duì)所述圖像數(shù)據(jù)和所述音頻數(shù)據(jù)進(jìn)行剪輯，包括：

將所述起始剪輯點(diǎn)與所述終止剪輯點(diǎn)之間的圖像序列作為待刪除圖像序列，從所述圖像數(shù)據(jù)中刪除所述待刪除圖像序列，得到目標(biāo)圖像數(shù)據(jù)；

將所述起始剪輯點(diǎn)與所述終止剪輯點(diǎn)之間的音頻序列作為待刪除音頻序列，從所述音頻數(shù)據(jù)中刪除所述待刪除音頻序列，得到目標(biāo)音頻數(shù)據(jù)。

8.一種視頻處理裝置，其特征在于，包括：

獲取模塊，用于獲取待處理的視頻數(shù)據(jù)，從所述視頻數(shù)據(jù)中獲取至少一個(gè)圖像集；所述圖像集包括至少兩個(gè)連續(xù)幀圖像；

第一確定模塊，用于從所述連續(xù)幀圖像中確定關(guān)鍵編碼幀，并確定所述關(guān)鍵編碼幀的場景類別；

第二確定模塊，用于基于所述場景類別，確定所述視頻數(shù)據(jù)的剪輯點(diǎn)；

剪輯模塊，用于根據(jù)所述剪輯點(diǎn)，對(duì)所述視頻數(shù)據(jù)進(jìn)行剪輯。

9.一種電子設(shè)備，包括存儲(chǔ)器、處理器及存儲(chǔ)在存儲(chǔ)器上的計(jì)算機(jī)程序，其特征在于，所述處理器執(zhí)行所述計(jì)算機(jī)程序以實(shí)現(xiàn)權(quán)利要求1至7任一項(xiàng)所述方法的步驟。

10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，其特征在于，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1至7任一項(xiàng)所述方法的步驟。