[發明專利]特征編碼器訓練方法、裝置和系統以及同源視頻查詢方法

在審

• 申請號: 202011137861.6
• 申請日: 2020-10-22
• 公開（公告）號: CN114385857A
• 公開（公告）日: 2022-04-22
• 發明（設計）人: 潘玉霖;呂逸良;韓振;唐銘謙
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: G06F16/783
• 分類號: G06F16/783;G06F16/738;G06N3/04;G06N3/08
• 代理公司: 北京清源匯知識產權代理事務所(特殊普通合伙) 11644
• 代理人: 張艷梅;馮德魁

1.一種特征編碼器訓練方法，其特征在于，包括：

獲得待處理的視頻；

從至少一個待處理的視頻中選取兩個視頻片段，所述兩個視頻片段在時間軸上至少部分重合；兩個視頻片段包括第一視頻片段和第二視頻片段；

對所述第二視頻片段采用預先設置的圖像編輯方式進行圖像編輯處理，得到編輯處理后的與所述第二視頻片段相似的第二目標視頻片段；

將第一視頻片段和第二目標視頻片段包含的所有幀，輸入幀特征編碼器，得到幀特征向量；

根據所述幀特征向量訓練幀特征編碼器，得到目標幀特征編碼器。

2.根據權利要求1所述的數據處理方法，其特征在于，還包括：

將所有幀特征向量進行分片段處理，得到片段包含的幀特征向量；

將每個片段包含的幀特征向量輸入片段特征編碼器進行處理，得到片段特征向量；

根據所述片段特征向量訓練片段特征編碼器，得到目標片段特征編碼器。

3.根據權利要求2所述的數據處理方法，其特征在于，所述將所有幀特征向量進行分片段處理，得到片段包含的幀特征向量，包括：

將所有幀特征向量按照預設的時間間隔進行分片段處理，得到片段包含的幀特征向量。

4.根據權利要求1所述的數據處理方法，其特征在于，所述根據所述幀特征向量訓練幀特征編碼器，得到目標幀特征編碼器，包括：

將任一待處理視頻的第二目標視頻片段和第一視頻片段中時間定位相同的幀的幀特征向量作為正樣本對；

將待處理的視頻之外的其他視頻的幀對應的幀特征向量作為負樣本，進行對比損失的計算和反向傳播，得到目標幀特征編碼器。

5.根據權利要求2所述的數據處理方法，其特征在于，所述根據所述片段特征向量訓練片段特征編碼器，得到目標片段特征編碼器，包括：

將任一待處理視頻的第二目標視頻片段和第一視頻片段對應的片段特征向量作為正樣本對；

將待處理的視頻之外的其他視頻的視頻片段對應的片段特征向量作為負樣本，進行對比損失的計算和反向傳播，得到目標片段特征編碼器。

6.根據權利要求1所述的數據處理方法，其特征在于，所述預先設置的圖像編輯方式，包括旋轉編輯、翻轉編輯、裁剪編輯和平移編輯四種編輯方式中的至少一種；和/或，亮度編輯、飽和度編輯、對比度編輯和色相編輯四種編輯方式中的至少一種。

7.一種特征編碼器訓練裝置，其特征在于，包括：

視頻獲得單元，用于獲得待處理的視頻；

視頻片段選取單元，用于從至少一個待處理的視頻中選取兩個視頻片段，所述兩個視頻片段在時間軸上至少部分重合；兩個視頻片段包括第一視頻片段和第二視頻片段；

圖像編輯處理單元，用于對所述第二視頻片段采用預先設置的圖像編輯方式進行圖像編輯處理，得到編輯處理后的與所述第二視頻片段相似的第二目標視頻片段；

幀特征向量得到單元，用于將第一視頻片段和第二目標視頻片段包含的所有幀，輸入幀特征編碼器，得到幀特征向量；

幀特征編碼器訓練單元，用于根據所述幀特征向量訓練幀特征編碼器，得到目標幀特征編碼器。

8.一種電子設備，其特征在于，包括：

處理器；以及

存儲器，用于存儲特征編碼器訓練方法的程序，該設備通電并通過所述處理器運行該特征編碼器訓練方法的程序后，執行下述步驟：

獲得待處理的視頻；

從至少一個待處理的視頻中選取兩個視頻片段，所述兩個視頻片段在時間軸上至少部分重合；兩個視頻片段包括第一視頻片段和第二視頻片段；

對所述第二視頻片段采用預先設置的圖像編輯方式進行圖像編輯處理，得到編輯處理后的與所述第二視頻片段相似的第二目標視頻片段；

將第一視頻片段和第二目標視頻片段包含的所有幀，輸入幀特征編碼器，得到幀特征向量；

根據所述幀特征向量訓練幀特征編碼器，得到目標幀特征編碼器。