[發(fā)明專利]一種查找相似視頻片段的方法、系統(tǒng)、服務(wù)器及存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 202011157679.7
• 申請日: 2020-10-26
• 公開（公告）號: CN112434185B
• 公開（公告）日: 2023-07-14
• 發(fā)明（設(shè)計）人: 余英;常江;宮良;夏泳;黨海飛;易鵬;劉駿;曹志;韋安明;李忠炤;韓凱;肖輝;劉文翰;丁正華;高楊;薛靜宜
• 申請（專利權(quán)）人: 國家廣播電視總局廣播電視規(guī)劃院;北京中廣恒通科技有限公司
• 主分類號: G06F16/783
• 分類號: G06F16/783;G06F16/732;G06V10/74;G06V10/82;G06N3/0464;G06N3/08
• 代理公司: 北京博雅睿泉專利代理事務(wù)所(特殊普通合伙) 11442
• 代理人: 吳秀娥

本發(fā)明涉及一種查找相似視頻片段的方法，用于在對比視頻中查找與待測視頻中相似的視頻片段，包括：S1，預(yù)先對卷積神經(jīng)網(wǎng)絡(luò)系統(tǒng)進(jìn)行訓(xùn)練，以識別物體；S2，獲取待測視頻通過抽幀方式形成的第一圖片序列；S3，通過訓(xùn)練后的卷積神經(jīng)網(wǎng)絡(luò)系統(tǒng)來識別第一圖片序列中的物體，以得到用來標(biāo)識物體的第一特征碼；S4，獲取對比視頻預(yù)先通過抽幀形成的第二圖片序列并對其進(jìn)行識別和標(biāo)識的第二特征碼；S5，將第一特征碼與第二特征碼進(jìn)行對比，找出相似的連續(xù)視頻片段；本發(fā)明通過對比和存儲少量字節(jié)的視頻關(guān)鍵幀特征值信息，不僅節(jié)省算力開銷，而且提高視頻查重的準(zhǔn)確率。

技術(shù)領(lǐng)域

本發(fā)明涉及一種視頻處理技術(shù)領(lǐng)域，尤其涉及一種查找相似視頻片段的方法、系統(tǒng)、服務(wù)器及存儲介質(zhì)。

背景技術(shù)

在互聯(lián)網(wǎng)、大數(shù)據(jù)穩(wěn)定發(fā)展的時代背景下，多媒體信息的需求量呈現(xiàn)爆發(fā)式增長，如今視頻平臺都需要通過視頻檢索實(shí)現(xiàn)對視頻資源的有效管理，例如，通過視頻檢索衡量兩個視頻片段之間的相似性，從而實(shí)現(xiàn)視頻推薦、視頻去重、盜版檢測等視頻管理業(yè)務(wù)。

目前檢測和查找相似視頻主要有以下幾種方法：

第一種，抽取對比視頻關(guān)鍵幀，將關(guān)鍵幀進(jìn)行抽樣和壓縮，形成縮略圖數(shù)據(jù)。抽取待測視頻關(guān)鍵幀，形成縮略圖數(shù)據(jù)后與對比視頻的數(shù)據(jù)進(jìn)行對比。如果兩者相似度較高，則通過人工審核來確定是否為相似視頻片段。

第二種，抽取對比視頻關(guān)鍵幀，定位字幕信息，通過OCR技術(shù)提取字幕。對待測視頻做類似處理，將字幕內(nèi)容的數(shù)據(jù)與對比視頻的數(shù)據(jù)進(jìn)行對比，來確認(rèn)相似度。如果兩者相似度較高，則通過人工審核來確定是否為相似視頻片段。

第三種，提取對比視頻的語音信息，形成臺詞和旋律數(shù)據(jù)。對待測視頻做類似處理，提取待測視頻的語音信息，并將其與臺詞旋律庫中的數(shù)據(jù)進(jìn)行對比，以得出相似度。

第四種，抽取對比視頻關(guān)鍵幀，通過人臉識別來形成視頻特征數(shù)據(jù)。待測視頻同樣進(jìn)行人臉識別，可用于粗略判斷是否為同一演員，以及演員數(shù)量，出場次序，形成視頻的人臉和劇情特征數(shù)據(jù)。

上述四種方法中，第一種運(yùn)算量太大，占用過多的服務(wù)器算力。第二種和第三種方法依賴字幕信息和語音信息。第三種對于沒有演員的紀(jì)錄片風(fēng)景片則無能為力。

發(fā)明內(nèi)容

針對目前查找相似視頻片段存在的上述問題，本發(fā)明提供一種查找相似視頻片段的方法、系統(tǒng)、服務(wù)器和計算機(jī)可讀存儲介質(zhì)。

本發(fā)明解決技術(shù)問題所采用的技術(shù)方案為：

一種查找相似視頻片段的方法，用于在對比視頻中查找與待測視頻中相似的連續(xù)視頻片段，包括：

S1，預(yù)先對卷積神經(jīng)網(wǎng)絡(luò)系統(tǒng)進(jìn)行訓(xùn)練，以識別物體；

S2，獲取待測視頻通過抽幀方式形成的第一圖片序列；

S3，通過訓(xùn)練后的卷積神經(jīng)網(wǎng)絡(luò)系統(tǒng)來識別所述第一圖片序列中的物體，以得到用來標(biāo)識物體的第一特征碼；

S4，獲取對比視頻預(yù)先通過抽幀形成的第二圖片序列并對其進(jìn)行識別和標(biāo)識的第二特征碼；

S5，將所述第一特征碼與所述第二特征碼進(jìn)行對比，找出相似的連續(xù)視頻片段。

本發(fā)明優(yōu)選的實(shí)施例，還包括：

S6，對所述待測視頻中相似的連續(xù)視頻片段中的每幀圖片進(jìn)行灰度縮略圖計算，以得到多個灰度縮略圖數(shù)據(jù)；從對比視頻中獲取預(yù)先計算出的相似的連續(xù)視頻片段中任意一幀圖片的第一灰度縮略圖數(shù)據(jù)；

S7，根據(jù)第一灰度縮略圖數(shù)據(jù)和多個灰度縮略圖數(shù)據(jù)判斷該相似的連續(xù)視頻片段是否屬于重復(fù)片段。