[發明專利]媒體數據的排重方法、目標模型的訓練方法和裝置

在審

• 申請號: 202210934297.3
• 申請日: 2022-08-04
• 公開（公告）號: CN115292541A
• 公開（公告）日: 2022-11-04
• 發明（設計）人: 郭卉
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06F16/583
• 分類號: G06F16/583;G06V10/42;G06V10/762;G06V10/74;G06V10/774
• 代理公司: 華進聯合專利商標代理有限公司 44224
• 代理人: 楊歡

1.一種媒體數據的排重方法，其特征在于，所述方法包括：

對待處理媒體數據進行物體檢測，并基于物體檢測結果對所述待處理媒體數據進行劃分得到多個物體子圖，其中，每個所述物體子圖分別對應一個物體；

提取每個所述物體子圖的物體表征，其中，從所述物體子圖中提取出的物體表征用于表示相應物體子圖所對應物體的隱層特征；

基于提取得到的物體表征確定與各個物體分別對應的目標物體表征；

獲取物體表征庫，所述物體表征庫中存儲有多個參考物體表征，以及每個參考物體表征與各自所屬媒體數據的對應關系；

從所述物體表征庫中查找與所述目標物體表征間滿足相似條件的參考物體表征，并根據查找結果確定所述待處理媒體數據的排重結果。

2.根據權利要求1所述的方法，其特征在于，所述待處理媒體數據包括待處理視頻，所述對待處理媒體數據進行物體檢測，并基于物體檢測結果對所述待處理媒體數據進行劃分得到多個物體子圖，包括：

從所述待處理視頻中抽取得到至少一幀全局圖像；

對每幀全局圖像進行物體檢測，得到每幀全局圖像各自對應的特征熱力圖；

基于每幀全局圖像各自對應的特征熱力圖，從所述至少一幀全局圖像中截取出多個物體子圖。

3.根據權利要求1所述的方法，其特征在于，所述基于提取得到的物體表征確定與各個物體分別對應的目標物體表征，包括：

對提取得到的物體表征進行聚類，得到第一預設數量個聚類中心、以及每個聚類中心所對應的物體表征；其中，一個聚類中心對應一個物體；

計算每個聚類中心各自對應的物體表征分別與相應聚類中心之間的距離；

根據所述距離對每個聚類中心所對應的物體表征進行篩選，得到與每個物體分別對應的目標物體表征。

4.根據權利要求1所述的方法，其特征在于，所述物體表征庫的構建步驟包括：

對媒體庫中的每個媒體數據進行物體檢測，并基于物體檢測結果對相應媒體數據進行劃分，得到相應媒體數據的多個物體子圖；

提取每個媒體數據的每個物體子圖的物體表征；

從每個媒體數據對應的多個物體表征中，確定與每個物體分別對應的參考物體表征；

基于每個參考物體表征、以及每個參考物體表征與各自所屬媒體數據的對應關系，構建所述物體表征庫。

5.根據權利要求1所述的方法，其特征在于，所述根據查找結果確定所述待處理媒體數據的排重結果，包括：

當在所述物體表征庫中查找到與所述目標物體表征間滿足相似條件的參考物體表征的情況下，將查找到的各參考物體表征分別所屬的媒體數據，作為所述待處理媒體數據的相似媒體數據；

確定各相似媒體數據各自的匹配分值；

按照所述匹配分值的大小對各所述相似媒體數據進行排序得到排序結果，并基于所述排序結果確定所述待處理媒體數據的排重結果。

6.根據權利要求5所述的方法，其特征在于，每個所述相似媒體數據的匹配分值的確定步驟包括：

根據所述待處理媒體數據包括的物體標識和所述相似媒體數據包括的物體標識，確定所述待處理媒體數據和所述相似媒體數據均包括的目標物體標識；

確定各所述目標物體標識各自所屬類別的類別權重；

確定所述待處理媒體數據中所包括物體的第一物體總數量；

確定所述待處理媒體數據和所述相似媒體數據在相同的目標物體標識下，所述待處理媒體數據中的滿足相似條件的目標物體表征的第一數量、以及所述待處理媒體數據中對應于相同的目標物體標識的目標物體表征的第二數量；

根據所述類別權重、所述第一物體總數量、所述第一數量和所述第二數量，確定所述相似媒體數據的匹配分值。