[發(fā)明專利]視頻搜索方法及裝置、電子設(shè)備和介質(zhì)

在審

• 申請?zhí)枺?/td>: 202110468619.5
• 申請日: 2021-04-28
• 公開（公告）號: CN113139092A
• 公開（公告）日: 2021-07-20
• 發(fā)明（設(shè)計）人: 林天威;何棟梁
• 申請（專利權(quán)）人: 北京百度網(wǎng)訊科技有限公司
• 主分類號: G06F16/783
• 分類號: G06F16/783;G06K9/00;G06N3/04
• 代理公司: 北京市漢坤律師事務(wù)所 11602
• 代理人: 姜浩然;吳麗麗

1.一種視頻搜索方法，包括：

提取待搜索視頻的第一編碼特征；

對所述第一編碼特征進(jìn)行壓縮，得到第二編碼特征；

根據(jù)所述第二編碼特征，從多個候選視頻中確定與所述待搜索視頻相匹配的至少一個目標(biāo)視頻；以及

根據(jù)所述第二編碼特征，分別從各目標(biāo)視頻中確定與所述待搜索視頻相匹配的目標(biāo)片段。

2.根據(jù)權(quán)利要求1所述的方法，其中，所述提取待搜索視頻的第一編碼特征包括：

將所述待搜索視頻輸入預(yù)設(shè)的第一編碼網(wǎng)絡(luò)，以便所述第一編碼網(wǎng)絡(luò)輸出所述第一編碼特征。

3.根據(jù)權(quán)利要求2所述的方法，其中，所述第一編碼網(wǎng)絡(luò)為分類網(wǎng)絡(luò)，所述分類網(wǎng)絡(luò)包括相連的全連接層和分類輸出層；

所述將所述待搜索視頻輸入預(yù)設(shè)的第一編碼網(wǎng)絡(luò)，以便所述第一編碼網(wǎng)絡(luò)輸出所述第一編碼特征包括：

將所述待搜索視頻輸入所述第一編碼網(wǎng)絡(luò)；以及

將所述第一編碼網(wǎng)絡(luò)的全連接層的輸出作為所述第一編碼特征。

4.根據(jù)權(quán)利要求2或3所述的方法，其中，所述待搜索視頻包括多個視頻片段，每個視頻片段包括第一預(yù)設(shè)數(shù)量的圖像幀；

所述將所述待搜索視頻輸入預(yù)設(shè)的第一編碼網(wǎng)絡(luò)，以便所述第一編碼網(wǎng)絡(luò)輸出所述第一編碼特征包括：

分別將各視頻片段輸入所述第一編碼網(wǎng)絡(luò)，以便所述第一編碼網(wǎng)絡(luò)輸出各視頻片段的片段編碼；以及

將所述多個視頻片段的片段編碼進(jìn)行組合，得到所述第一編碼特征。

5.根據(jù)權(quán)利要求1-4中任一項所述的方法，其中，所述對所述第一編碼特征進(jìn)行壓縮，得到第二編碼特征包括：

將所述第一編碼特征輸入預(yù)設(shè)的第二編碼網(wǎng)絡(luò)，以便所述第二編碼網(wǎng)絡(luò)輸出壓縮后的所述第二編碼特征。

6.根據(jù)權(quán)利要求5所述的方法，其中，所述第二編碼網(wǎng)絡(luò)為偽孿生網(wǎng)絡(luò)中的第一分支，所述第一分支包括編碼器；

所述將所述第一編碼特征輸入預(yù)設(shè)的第二編碼網(wǎng)絡(luò)，以便所述第二編碼網(wǎng)絡(luò)輸出壓縮后的所述第二編碼特征包括：

將所述第一編碼特征輸入所述第二編碼網(wǎng)絡(luò)；以及

將所述第二編碼網(wǎng)絡(luò)的編碼器的輸出作為壓縮后的所述第二編碼特征。

7.根據(jù)權(quán)利要求1-6中任一項所述的方法，其中，所述根據(jù)所述第二編碼特征，從多個候選視頻中確定與所述待搜索視頻相匹配的至少一個目標(biāo)視頻包括：

獲取所述多個候選視頻中的每一個候選視頻的壓縮特征；

根據(jù)所述第二編碼特征和相應(yīng)的壓縮特征，分別確定所述待搜索視頻與每一個候選視頻的相似度；以及

將相似度最大的第二預(yù)設(shè)數(shù)量的候選視頻作為所述至少一個目標(biāo)視頻，或者，將相似度大于第一閾值的候選視頻作為所述至少一個目標(biāo)視頻。

8.根據(jù)權(quán)利要求7所述的方法，其中，所述壓縮特征包括多個壓縮特征片段，每個所述壓縮特征片段的長度與所述第二編碼特征的長度相同；

所述根據(jù)所述第二編碼特征和相應(yīng)的壓縮特征，分別確定所述待搜索視頻與每一個候選視頻的相似度包括：

對于每一個候選視頻：

分別計算所述第二編碼特征與該候選視頻的每一個壓縮特征片段的相似度；以及

將該候選視頻的各壓縮特征片段的相似度的平均值作為待搜索視頻與該候選視頻的相似度。

9.根據(jù)權(quán)利要求1-8中任一項所述的方法，其中，所述根據(jù)所述第二編碼特征，分別從各目標(biāo)視頻中確定與所述待搜索視頻相匹配的目標(biāo)片段包括：

獲取各目標(biāo)視頻的壓縮特征，所述壓縮特征包括多個壓縮特征片段，每個所述壓縮特征片段的長度與所述第二編碼特征的長度相同；

對于每一個目標(biāo)視頻：

分別計算所述第二編碼特征與該目標(biāo)視頻的每一個壓縮特征片段的相似度；

將相似度大于第二閾值的壓縮特征片段作為目標(biāo)壓縮特征片段；以及

將目標(biāo)壓縮特征片段對應(yīng)的目標(biāo)視頻中的片段作為目標(biāo)片段。