[發明專利]一種視頻檢測方法、裝置、電子設備以及存儲介質

有效

• 申請號: 202110586366.1
• 申請日: 2021-05-27
• 公開（公告）號: CN113239855B
• 公開（公告）日: 2023-04-18
• 發明（設計）人: 張飛;梁藝鏵;王素珍;丁銳
• 申請（專利權）人: 抖音視界有限公司
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06V10/74;G06V10/40
• 代理公司: 北京開陽星知識產權代理有限公司 11710
• 代理人: 祝樂芳

1.一種視頻檢測方法，其特征在于，包括：

分別對待進行相似度檢測的第一視頻和第二視頻進行抽幀，得到第一視頻圖像幀集合和第二視頻圖像幀集合；

提取所述第一視頻圖像幀集合和第二視頻圖像幀集合中各圖像幀的圖像特征；

將所述第一視頻相鄰兩圖像幀的所述圖像特征進行差分，得到第一視頻特征差分集合；并將所述第二視頻相鄰兩圖像幀的所述圖像特征進行差分，得到第二視頻特征差分集合；

基于所述第一視頻特征差分集合和所述第二視頻特征差分集合，查找第一視頻與第二視頻中的匹配片段；

根據所述匹配片段，計算所述第一視頻和所述第二視頻之間的相似度并確定兩視頻是否相似；

所述提取所述第一視頻圖像幀集合和第二視頻圖像幀集合中各圖像幀的圖像特征，包括：

基于深度特征提取模型提取所述圖像特征；

所述深度特征提取模型為訓練動量對比模型得到的q編碼模塊，所述動量對比模型包括q編碼模塊和k編碼模塊；

所述訓練動量對比模型包括：自監督微調訓練，和/或，有監督微調訓練。

2.根據權利要求1所述的方法，其特征在于，所述基于所述第一視頻特征差分集合和所述第二視頻特征差分集合，查找第一視頻與第二視頻中的匹配片段包括：

基于所述第一視頻的時長小于所述第二視頻的時長，確定所述第一視頻特征差分集合為模式序列，且所述第二視頻特征差分集合為主序列；

基于所述模式序列和所述主序列，查找第一視頻與第二視頻中的匹配片段。

3.根據權利要求2所述的方法，其特征在于，所述基于所述模式序列和所述主序列，查找第一視頻與第二視頻中的匹配片段包括：

確定所述模式序列中各元素和所述主序列中各元素之間的相似度；

基于所述主序列確定多個子序列，每個所述子序列的長度大于所述模式序列；

基于所述模式序列中各元素和所述主序列中各元素之間的相似度以及所述多個子序列，確定所述模式序列的匹配序列。

4.根據權利要求3所述的方法，其特征在于，所述基于所述主序列確定多個子序列包括：

設置用于確定子序列的滑動窗口的長度和滑動步長，所述滑動窗口的長度大于所述模式序列的長度；

基于所述滑動窗口的長度和所述滑動步長，從所述主序列中確定多個子序列。

5.根據權利要求3所述的方法，其特征在于，所述基于所述模式序列中各元素和所述主序列中各元素之間的相似度以及所述多個子序列，確定所述模式序列的匹配序列包括：

基于所述模式序列中各元素和所述主序列中各元素之間的相似度，確定所述模式序列在每個所述子序列中的匹配距離；

確定最小的匹配距離所對應的子序列為所述模式序列的匹配序列。

6.根據權利要求3所述的方法，其特征在于，所述確定所述模式序列的匹配序列之后，所述方法還包括：

基于所述模式序列與所述匹配序列之間的相似度向量，裁剪所述模式序列和所述匹配序列，得到最佳匹配片段；

所述根據所述匹配片段，計算所述第一視頻和所述第二視頻之間的相似度并確定兩視頻是否相似包括：

根據所述最佳匹配片段，計算所述第一視頻和所述第二視頻之間的相似度并確定兩視頻是否相似。

7.根據權利要求6所述的方法，其特征在于，所述裁剪所述模式序列和所述匹配序列包括：

剔除所述模式序列和所述匹配序列兩端相似度滿足剔除條件的連續幀。

8.根據權利要求7所述的方法，其特征在于，所述剔除條件為：相似度小于所述相似度向量中最大相似度的一半。

9.根據權利要求3所述的方法，其特征在于，所述根據所述匹配片段，計算所述第一視頻和所述第二視頻之間的相似度包括：

基于所述模式序列與所述匹配序列之間的相似度向量，計算平均相似度，所述平均相似度為所述第一視頻和所述第二視頻之間的相似度。