[發明專利]目標檢測網絡構建優化方法、裝置、設備、介質及產品

在審

• 申請號: 202180001203.0
• 申請日: 2021-05-14
• 公開（公告）號: CN113574566A
• 公開（公告）日: 2021-10-29
• 發明（設計）人: 高偉;廖桂標;李革
• 申請（專利權）人: 北京大學深圳研究生院
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06K9/46;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 深圳市世紀恒程知識產權代理事務所 44287
• 代理人: 胡海國

1.一種目標檢測網絡構建優化方法，其特征在于，所述目標檢測網絡構建優化方法包括：

獲取高質量可視媒體數據、所述高質量可視媒體數據對應的低質量可視媒體數據以及對應的真實標簽，分別提取預設先驗網絡針對于所述高質量可視媒體數據的第一主干網側面輸出特征以及提取預設待訓練目標檢測網絡針對于所述低質量可視媒體數據的第二主干網側面輸出特征；

基于所述第一主干網側面輸出特征、所述第二主干網側面輸出特征和所述真實標簽，構建表示所述預設先驗網絡與所述預設待訓練目標檢測網絡之間的相關性的特征相關性損失、表示所述預設先驗網絡和所述預設待訓練目標檢測網絡之間進行顯著目標定位的顯著目標位置損失以及顯著性預測損失；

基于所述特征相關性損失、所述顯著性目標位置損失以及所述顯著性預測損失，優化所述預設待訓練目標檢測網絡，獲得目標檢測網絡。

2.如權利要求1所述目標檢測網絡構建優化方法，其特征在于，所述第一主干網側面輸出特征至少包括一第一網絡高層特征，所述第二主干網側面輸出特征至少包括一第二網絡高層特征，

所述基于所述第一主干網側面輸出特征、所述第二主干網側面輸出特征和所述真實標簽，構建表示所述預設先驗網絡與所述預設待訓練目標檢測網絡之間的相關性的特征相關性損失、表示所述預設先驗網絡和所述預設待訓練目標檢測網絡之間進行顯著目標定位的顯著目標位置損失以及顯著性預測損失的步驟包括：

基于所述第一主干網側面輸出特征與所述第二主干網側面輸出特征之間的差異度，構建表示所述預設先驗網絡與所述預設待訓練目標檢測網絡之間的相關性的特征相關性損失；

對各所述第一網絡高層特征進行融合，獲得所述預設先驗網絡對應的第一顯著性預測圖，并對各所述第二網絡高層特征進行融合，獲得所述預設待訓練目標檢測網絡對應的第二顯著性預測圖；

基于所述第一顯著性預測圖和所述第二顯著性預測圖之間的顯著目標位置的差異度，構建所述顯著目標位置損失；

基于所述第二顯著性預測圖與所述真實標簽，構建所述顯著性預測損失。

3.如權利要求2所述目標檢測網絡構建優化方法，其特征在于，所述基于所述第一主干網側面輸出特征與所述第二主干網側面輸出特征之間的差異度，構建表示所述預設先驗網絡與所述預設待訓練目標檢測網絡之間的相關性的特征相關性損失的步驟包括：

在所述第一主干網側面輸出特征中分別提取各第一局部特征圖和各第一全局特征圖，并在所述第二主干網側面輸出特征中提取各第二局部特征圖和各第二全局特征圖；

基于各所述第一局部特征圖與各所述第二局部特征圖之間的差異度以及各所述第一全局特征圖與各所述第二全局特征圖之間的差異度，構建所述特征相關性損失。

4.如權利要求2所述目標檢測網絡構建優化方法，其特征在于，所述基于所述第一顯著性預測圖和所述第二顯著性預測圖之間的顯著目標位置的差異度，構建所述顯著目標位置損失的步驟包括：

在所述第一顯著性預測圖中確定顯著目標對應的第一目標網絡通道輸出，并在所述第二顯著性預測圖中確定顯著目標對應的第二目標網絡通道輸出；

基于所述第一目標網絡通道輸出和所述第二目標網絡通道輸出之間的差異度，構建所述顯著目標位置損失。

5.如權利要求2所述目標檢測網絡構建優化方法，其特征在于，所述所述第二主干網側面輸出特征至少包括一網絡低層特征，所述顯著性預測損失包括第一顯著性預測損失和第二顯著性預測損失，

所述基于所述第二顯著性預測圖與所述真實標簽，構建所述顯著性預測損失的步驟包括：

基于所述第二顯著性預測圖對應的預測輸出標簽與所述真實標簽之間的差異度，構建所述第一顯著性預測損失；和/或

基于所述第二顯著性預測圖和各所述網絡低層特征，構建層次化細化特征；基于所述層次化細化特征生成的第三顯著性預測圖與所述真實標簽之間的差異度，構建所述第二顯著性預測損失。