[發明專利]數據處理方法以及計算機設備

在審

• 申請號: 202110062892.8
• 申請日: 2021-01-18
• 公開（公告）號: CN113570509A
• 公開（公告）日: 2021-10-29
• 發明（設計）人: 何盛烽;任蘇成;孫子荀;鄧大付;王巨宏;劉婷婷
• 申請（專利權）人: 華南理工大學;騰訊科技（深圳）有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06K9/46;G06K9/32;G06N3/04;G06N3/08
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 熊永強;杜維

1.一種數據處理方法，其特征在于，包括：

獲取多媒體數據對應的數據結構特征，生成所述數據結構特征對應的激勵圖像；所述激勵圖像用于突出所述多媒體數據中的顯著對象所在的預測區域；

獲取所述多媒體數據對應的顯著內容特征，根據所述激勵圖像對所述顯著內容特征進行特征增強，得到激勵內容特征；

生成所述激勵內容特征對應的對象區域圖像；所述對象區域圖像用于檢測所述多媒體數據中的所述顯著對象。

2.根據權利要求1所述的方法，其特征在于，所述數據結構特征包括空間特征，所述激勵圖像包括空間激勵圖像；

所述獲取多媒體數據對應的數據結構特征，生成所述數據結構特征對應的激勵圖像，包括：

獲取所述多媒體數據，將所述多媒體數據輸入至數據檢測模型中的空間激勵預測組件；

根據所述空間激勵預測組件中的空間編碼器，對所述多媒體數據進行特征提取，得到所述多媒體數據對應的所述空間特征；

根據所述空間激勵預測組件中的空間解碼器，對所述空間特征進行解碼，生成所述多媒體數據對應的所述空間激勵圖像。

3.根據權利要求2所述的方法，其特征在于，所述空間編碼器包括殘差塊和空洞卷積層；

所述根據所述空間激勵預測組件中的空間編碼器，對所述多媒體數據進行特征提取，得到所述多媒體數據對應的空間特征，包括：

根據所述空間激勵預測組件中的所述殘差塊，對所述多媒體數據進行卷積處理，得到所述多媒體數據對應的殘差卷積特征；

獲取所述空洞卷積層對應的空洞率，根據所述空洞率對所述殘差卷積特征進行卷積處理，得到所述殘差卷積特征對應的空洞卷積特征；

將所述殘差卷積特征和所述空洞卷積特征，確定為所述多媒體數據對應的空間特征。

4.根據權利要求1所述的方法，其特征在于，所述多媒體數據包括視頻數據，所述數據結構特征包括時間特征，所述激勵圖像包括時間激勵圖像；

所述獲取多媒體數據對應的數據結構特征，生成所述數據結構特征對應的激勵圖像，包括：

獲取所述視頻數據，在所述視頻數據中獲取相鄰的視頻幀T_n-1和視頻幀T_n；n為小于或等于所述視頻數據所劃分的視頻幀數量的正整數；

獲取所述視頻幀T_n-1和所述視頻幀T_n之間的光流圖像；所述光流圖像用于表征所述視頻數據中的所述顯著對象的像素運動；

將所述光流圖像輸入至所述數據檢測模型中的時間激勵預測組件，根據所述時間激勵預測組件中的時間編碼器，對所述光流圖像進行特征提取，得到所述光流圖像對應的時間特征；

根據所述時間激勵預測組件中的時間解碼器，對所述時間特征進行解碼，生成所述光流圖像對應的所述時間激勵圖像。

5.根據權利要求1所述的方法，其特征在于，所述多媒體數據包括視頻數據，所述數據結構特征包括空間特征和時間特征，所述激勵圖像包括空間激勵圖像和時間激勵圖像；

所述獲取多媒體數據對應的數據結構特征，生成所述數據結構特征對應的激勵圖像，包括：

將所述視頻數據輸入至數據檢測模型中的空間激勵預測組件，在所述空間激勵預測組件中獲取所述視頻數據對應的所述空間特征，生成所述空間特征對應的空間激勵圖像；

獲取所述視頻數據對應的光流圖像，將所述光流圖像輸入至所述數據檢測模型中的時間激勵預測組件，根據所述時間激勵預測組件中的時間編碼器，獲取所述光流圖像對應的對象運動特征；所述光流圖像用于表征所述視頻數據中的所述顯著對象的像素運動；

根據所述空間激勵圖像對所述對象運動特征進行特征增強，得到所述光流圖像對應的所述時間特征；

根據所述時間激勵預測組件中的時間解碼器，生成所述光流圖像對應的所述時間激勵圖像。