[發(fā)明專利]視頻處理方法、設(shè)備、介質(zhì)及程序產(chǎn)品

有效

• 申請(qǐng)?zhí)枺?/td>: 202110525270.4
• 申請(qǐng)日: 2021-05-07
• 公開(kāi)（公告）號(hào): CN113301382B
• 公開(kāi)（公告）日: 2022-12-13
• 發(fā)明（設(shè)計(jì)）人: 楊虎;汪琦;馮知凡;柴春光;朱勇
• 申請(qǐng)（專利權(quán)）人: 北京百度網(wǎng)訊科技有限公司
• 主分類號(hào): H04N21/234
• 分類號(hào): H04N21/234;H04N21/845;G06V20/40;G06V40/16;G06V20/62
• 代理公司: 北京英賽嘉華知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11204
• 代理人: 王達(dá)佐;馬曉亞

1.一種視頻處理方法，包括：

獲取目標(biāo)視頻；

對(duì)所述目標(biāo)視頻進(jìn)行識(shí)別，得到識(shí)別結(jié)果，包括：對(duì)所述目標(biāo)視頻進(jìn)行切幀，得到多幀圖像；對(duì)所述多幀圖像中的每幀圖像進(jìn)行識(shí)別，得到所述每幀圖像對(duì)應(yīng)的識(shí)別結(jié)果，以及對(duì)所述目標(biāo)視頻的音頻進(jìn)行識(shí)別，得到音頻對(duì)應(yīng)的識(shí)別結(jié)果，其中，對(duì)所述目標(biāo)視頻進(jìn)行識(shí)別所得到的識(shí)別結(jié)果包括以下至少一項(xiàng)：所述目標(biāo)視頻中目標(biāo)對(duì)象的類別信息、所述目標(biāo)對(duì)象的內(nèi)容信息、所述目標(biāo)視頻的視頻屬性信息；

根據(jù)識(shí)別結(jié)果，確定所述目標(biāo)視頻的拆分維度，其中，所述拆分維度包括以下至少一項(xiàng)：幀畫(huà)面、鏡頭、視頻場(chǎng)景以及片段；

根據(jù)所述拆分維度，對(duì)所述目標(biāo)視頻進(jìn)行拆分，得到拆分結(jié)果；其中，

若所述識(shí)別結(jié)果包括所述目標(biāo)視頻的視頻屬性信息，所述根據(jù)識(shí)別結(jié)果，確定所述目標(biāo)視頻的拆分維度，包括：響應(yīng)于所述目標(biāo)視頻的視頻屬性信息符合預(yù)設(shè)的視頻屬性信息，將符合預(yù)設(shè)的視頻屬性信息的圖像確定為所述鏡頭；

若所述識(shí)別結(jié)果包括所述目標(biāo)視頻中目標(biāo)對(duì)象的類別信息，所述根據(jù)識(shí)別結(jié)果，確定所述目標(biāo)視頻的拆分維度包括：

響應(yīng)于確定所述目標(biāo)對(duì)象為所述目標(biāo)視頻的圖像中符合預(yù)設(shè)條件的對(duì)象，將所述目標(biāo)視頻中的、符合預(yù)設(shè)條件的對(duì)象所在的圖像確定為所述幀畫(huà)面；

若所述識(shí)別結(jié)果還包括目標(biāo)對(duì)象的內(nèi)容信息，獲取所述目標(biāo)對(duì)象在所述目標(biāo)視頻中的出現(xiàn)規(guī)律；響應(yīng)于確定所述目標(biāo)對(duì)象的內(nèi)容信息為預(yù)設(shè)的內(nèi)容信息，且所述出現(xiàn)規(guī)律符合預(yù)設(shè)的出現(xiàn)規(guī)律，將所述目標(biāo)視頻中的、符合預(yù)設(shè)的出現(xiàn)規(guī)律的目標(biāo)對(duì)象所在的所有圖像確定為所述片段。

2.根據(jù)權(quán)利要求1所述的方法，所述方法還包括：

獲取針對(duì)所述目標(biāo)視頻的拆分配置信息；

所述根據(jù)所述拆分維度，對(duì)所述目標(biāo)視頻進(jìn)行拆分，得到拆分結(jié)果，包括：

根據(jù)所述拆分配置信息和所述拆分維度，對(duì)所述目標(biāo)視頻進(jìn)行拆分，得到拆分結(jié)果。

3.根據(jù)權(quán)利要求1所述的方法，其中，若所述目標(biāo)對(duì)象包括目標(biāo)人物，所述預(yù)設(shè)條件包括：所述目標(biāo)人物在所述目標(biāo)視頻中出現(xiàn)的時(shí)長(zhǎng)符合預(yù)設(shè)的出現(xiàn)時(shí)長(zhǎng)閾值。

4.根據(jù)權(quán)利要求1所述的方法，其中，若所述目標(biāo)對(duì)象包括目標(biāo)字幕，所述預(yù)設(shè)條件包括：所述目標(biāo)字幕在所述目標(biāo)視頻的圖像中的位置和大小與預(yù)設(shè)的字幕的位置和大小匹配。

5.根據(jù)權(quán)利要求1所述的方法，其中，若所述目標(biāo)對(duì)象包括目標(biāo)圖像場(chǎng)景，所述預(yù)設(shè)條件包括：所述目標(biāo)圖像場(chǎng)景為預(yù)設(shè)的圖像場(chǎng)景。

6.根據(jù)權(quán)利要求5所述的方法，所述方法還包括：利用預(yù)先訓(xùn)練的圖像場(chǎng)景識(shí)別模型，對(duì)所述目標(biāo)圖像場(chǎng)景進(jìn)行識(shí)別，得到目標(biāo)圖像場(chǎng)景的類型。

7.根據(jù)權(quán)利要求6所述的方法，其中，所述圖像場(chǎng)景識(shí)別模型基于以下步驟確定：

對(duì)地點(diǎn)數(shù)據(jù)集中的圖像場(chǎng)景按照標(biāo)簽類別進(jìn)行聚類，其中，所述標(biāo)簽類別為室內(nèi)標(biāo)簽和室外標(biāo)簽；

利用所述地點(diǎn)數(shù)據(jù)集對(duì)卷積神經(jīng)網(wǎng)絡(luò)進(jìn)行訓(xùn)練，得到初始的場(chǎng)景識(shí)別模型；

利用預(yù)設(shè)的室內(nèi)場(chǎng)景圖像和室外場(chǎng)景圖像，對(duì)所述初始的場(chǎng)景識(shí)別模型進(jìn)行調(diào)整，以獲得所述圖像場(chǎng)景識(shí)別模型。

8.根據(jù)權(quán)利要求6或7所述的方法，若所述目標(biāo)圖像場(chǎng)景的類型為室外場(chǎng)景，所述方法還包括：

響應(yīng)于確定所述目標(biāo)圖像場(chǎng)景為地標(biāo)對(duì)應(yīng)的圖像場(chǎng)景，確定所述目標(biāo)圖像場(chǎng)景的類型為室外場(chǎng)景。

9.根據(jù)權(quán)利要求1所述的方法，其中，所述出現(xiàn)規(guī)律包括：時(shí)間序列和/或頻次。

10.根據(jù)權(quán)利要求1或9所述的方法，其中，所述目標(biāo)對(duì)象的內(nèi)容信息包括以下至少一項(xiàng)：目標(biāo)人物的身份信息、目標(biāo)字幕的文本信息、所述目標(biāo)視頻的音頻對(duì)應(yīng)的文本信息。

11.根據(jù)權(quán)利要求1所述的方法，其中，所述視頻屬性信息包括：幀亮度和/或相鄰幀HSV顏色空間。