[發(fā)明專利]視頻處理方法、視頻操作方法、裝置、存儲介質(zhì)和設(shè)備

有效

• 申請?zhí)枺?/td>: 202010562604.0
• 申請日: 2020-06-19
• 公開（公告）號: CN111541943B
• 公開（公告）日: 2020-10-16
• 發(fā)明（設(shè)計）人: 賀思穎;尚焱;張亞彬
• 申請（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44;H04N21/472;H04N21/234;G06K9/00;G06N3/04;G06N3/08
• 代理公司: 北京同達(dá)信恒知識產(chǎn)權(quán)代理有限公司 11291
• 代理人: 李娟

1.一種視頻處理方法，其特征在于，包括：

從視頻中獲取至少兩個目標(biāo)圖像幀組成的目標(biāo)圖像序列，每個目標(biāo)圖像幀中包含目標(biāo)對象；

獲取各個目標(biāo)圖像幀中用于標(biāo)示所述目標(biāo)對象的目標(biāo)檢測框的位置信息；

根據(jù)各個目標(biāo)圖像幀中的目標(biāo)檢測框的位置信息，確定所述目標(biāo)對象在所述目標(biāo)圖像序列中的穩(wěn)定度；

當(dāng)所述目標(biāo)對象在所述目標(biāo)圖像序列中的穩(wěn)定度滿足設(shè)定條件時，獲得所述目標(biāo)圖像序列組成的穩(wěn)定視頻片段。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述從視頻中獲取至少兩個目標(biāo)圖像幀組成的目標(biāo)圖像序列，包括：

根據(jù)視頻中圖像幀的排序，從視頻中獲取至少兩個目標(biāo)圖像幀，并在每個目標(biāo)圖像幀中標(biāo)示所述目標(biāo)對象的目標(biāo)檢測框；

確定每個目標(biāo)圖像幀中目標(biāo)檢測框?qū)?yīng)的圖像清晰度；

當(dāng)每個目標(biāo)圖像幀中目標(biāo)檢測框?qū)?yīng)的圖像清晰度均滿足設(shè)定清晰度條件時，獲得所述至少兩個目標(biāo)圖像幀組成的所述目標(biāo)圖像序列。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，根據(jù)視頻中圖像幀的排序，從視頻中獲取至少兩個目標(biāo)圖像幀，包括：

將所述視頻中的各個圖像幀分別輸入已訓(xùn)練的目標(biāo)檢測網(wǎng)絡(luò)模型，得到所述目標(biāo)檢測網(wǎng)絡(luò)模型輸出的圖像識別結(jié)果；所述圖像識別結(jié)果用于指示輸入的圖像幀中是否包含目標(biāo)對象；

根據(jù)視頻中圖像幀的排序和各個圖像幀對應(yīng)的圖像識別結(jié)果，從所述視頻中獲取包含目標(biāo)對象的至少兩個目標(biāo)圖像幀。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述目標(biāo)對象在所述目標(biāo)圖像序列中的穩(wěn)定度包括目標(biāo)抖動度；所述設(shè)定條件包括目標(biāo)抖動度滿足設(shè)定抖動閾值；所述根據(jù)各個目標(biāo)圖像幀中的目標(biāo)檢測框的位置信息，確定所述目標(biāo)對象在所述目標(biāo)圖像序列中的穩(wěn)定度，包括：

根據(jù)所述目標(biāo)圖像序列的各個目標(biāo)圖像幀中的目標(biāo)檢測框的位置信息，確定各個目標(biāo)檢測框的面積；

從各個目標(biāo)檢測框的面積中選擇最小檢測框面積；

獲取所述目標(biāo)圖像序列的所有目標(biāo)檢測框的整體動態(tài)范圍；所述整體動態(tài)范圍為包圍所有目標(biāo)檢測框的包絡(luò)線所包圍的區(qū)域的面積；

將所述整體動態(tài)范圍的面積與所述最小檢測框面積的比值，作為所述目標(biāo)圖像序列的目標(biāo)抖動度。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述目標(biāo)檢測框為多邊形框，所述目標(biāo)檢測框的位置信息包括位于目標(biāo)檢測框上的至少兩個目標(biāo)點(diǎn)的坐標(biāo)；獲取所述目標(biāo)圖像序列的所有目標(biāo)檢測框的整體動態(tài)范圍，包括：

確定所有目標(biāo)檢測框上的目標(biāo)點(diǎn)的坐標(biāo)中的橫坐標(biāo)最小值和縱坐標(biāo)最小值，以及橫坐標(biāo)最大值和縱坐標(biāo)最大值；

將得到的橫坐標(biāo)最小值和縱坐標(biāo)最小值作為所述整體動態(tài)范圍的左上角角點(diǎn)坐標(biāo)，將得到的橫坐標(biāo)最大值和縱坐標(biāo)最大值作為所述整體動態(tài)范圍的右下角角點(diǎn)坐標(biāo)，得到包圍所有多邊形框的方形的整體動態(tài)范圍。

6.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述目標(biāo)檢測框為圓形框，所述目標(biāo)檢測框的位置信息包括目標(biāo)檢測框的圓心坐標(biāo)和半徑長度；獲取所述目標(biāo)圖像序列的所有目標(biāo)檢測框的整體動態(tài)范圍，包括：

根據(jù)所有目標(biāo)檢測框的圓心坐標(biāo)，確定整體動態(tài)范圍的圓心坐標(biāo)；所述整體動態(tài)范圍的圓心為所有目標(biāo)檢測框的圓心的幾何中心；

確定所有目標(biāo)檢測框上的輪廓點(diǎn)至所述整體動態(tài)范圍的圓心的最遠(yuǎn)距離；

將所述最遠(yuǎn)距離作為所述整體動態(tài)范圍的半徑長度，得到圓形的整體動態(tài)范圍。

7.根據(jù)權(quán)利要求1或4所述的方法，其特征在于，所述目標(biāo)對象在所述目標(biāo)圖像序列中的穩(wěn)定度包括目標(biāo)偏離度；所述設(shè)定條件包括目標(biāo)偏離度滿足設(shè)定偏離閾值；所述根據(jù)各個目標(biāo)圖像幀中的目標(biāo)檢測框的位置信息，確定所述目標(biāo)對象在所述目標(biāo)圖像序列中的穩(wěn)定度，包括：

對于所述目標(biāo)圖像序列的各個目標(biāo)圖像幀中的目標(biāo)檢測框，分別確定每個目標(biāo)檢測框?qū)?yīng)的交并比；其中，目標(biāo)檢測框?qū)?yīng)的交并比為該目標(biāo)檢測框和選定目標(biāo)檢測框的相交面積與相并面積的比值；所述選定目標(biāo)檢測框為圖像清晰度最高的目標(biāo)檢測框；所述圖像清晰度為目標(biāo)檢測框?qū)?yīng)的圖像清晰度；

將得到的交并比中的最小值，作為所述目標(biāo)圖像序列的目標(biāo)偏離度。