[發明專利]圖像處理方法及裝置、電子設備和存儲介質

在審

• 申請號: 202010801035.0
• 申請日: 2020-08-11
• 公開（公告）號: CN111882558A
• 公開（公告）日: 2020-11-03
• 發明（設計）人: 王文集;夏清;胡志強
• 申請（專利權）人: 上海商湯智能科技有限公司
• 主分類號: G06T7/10
• 分類號: G06T7/10;G06K9/62;G06N3/04
• 代理公司: 北京林達劉知識產權代理事務所(普通合伙) 11277
• 代理人: 劉新宇

1.一種圖像處理方法，其特征在于，包括：

基于待處理圖像獲取一個或多個尺度的局部圖像；

對所述一個或多個局部圖像分別進行特征提取處理，得到與所述一個或多個尺度的局部圖像對應的特征圖；

基于所述與所述一個或多個尺度的局部圖像對應的特征圖對所述待處理圖像進行分割，得到分割結果。

2.根據權利要求1所述的圖像處理方法，其特征在于，所述基于待處理圖像獲取一個或多個尺度的局部圖像包括：

對待處理圖像進行多個尺度的截圖處理，獲得多個局部圖像，其中，所述多個局部圖像包括基準尺寸的第一局部圖像，以及大于基準尺寸的第二局部圖像，所述多個局部圖像的圖像中心相同。

3.根據權利要求2所述的圖像處理方法，其特征在于，所述對所述一個或多個局部圖像分別進行特征提取處理，得到與所述一個或多個尺度的局部圖像對應的特征圖包括：

對所述多個局部圖像分別進行特征提取處理，獲得與第一局部圖像對應的第一特征圖以及與第二局部圖像對應的第二特征圖。

4.根據權利要求3所述的圖像處理方法，其特征在于，所述基于所述與所述一個或多個尺度的局部圖像對應的特征圖對所述待處理圖像進行分割，得到分割結果，包括：

對所述第一特征圖和所述第二特征圖進行疊加處理，獲得第三特征圖；

對所述第三特征圖進行激活處理，獲得所述待處理圖像中的目標區域的分割結果。

5.根據權利要求3所述的方法，其特征在于，對所述多個局部圖像分別進行特征提取處理，獲得與第一局部圖像對應的第一特征圖以及與第二局部圖像對應的第二特征圖，包括：

對所述第二局部圖像進行下采樣處理，獲得基準尺寸的第三局部圖像；

對所述第一局部圖像和所述第三局部圖像分別進行特征提取處理，獲得與所述第一局部圖像對應的第一特征圖，以及與所述第二局部圖像對應的第二特征圖。

6.根據權利要求4所述的方法，其特征在于，對所述第一特征圖和所述第二特征圖進行疊加處理，獲得第三特征圖，包括：

對所述第二特征圖進行上采樣處理，獲得第四特征圖，所述第四特征圖和所述第一特征圖的尺寸之比，與所述第二局部圖像和所述第一局部圖像的尺寸之比相同；

對所述第四特征圖進行裁剪處理，獲得第五特征圖，所述第五特征圖與所述第一特征圖尺寸一致；

將所述第一特征圖和所述第五特征圖進行加權求和處理，獲得所述第三特征圖。

7.根據權利要求1所述的方法，其特征在于，所述圖像處理方法通過神經網絡實現，所述神經網絡包括多個特征提取網絡、疊加網絡和激活層，

其中，所述方法還包括：

通過樣本圖像對所述多個特征提取網絡、疊加網絡和激活層進行訓練，獲得訓練后的多個特征提取網絡、疊加網絡和激活層。

8.根據權利要求7所述的方法，其特征在于，通過樣本圖像對所述多個特征提取網絡、疊加網絡和激活層進行訓練，獲得訓練后的多個特征提取網絡、疊加網絡和激活層，包括：

對樣本圖像進行多個尺度的截圖處理，獲得基準尺寸的第四樣本局部圖像，以及大于基準尺寸的第五樣本局部圖像；

對所述第五樣本局部圖像進行下采樣處理，獲得基準尺寸的第六樣本局部圖像；

將所述第四樣本局部圖像和所述第六樣本局部圖像分別輸入對應的特征提取網絡進行特征提取處理，獲得與第四樣本局部圖像對應的第三樣本特征圖，以及與第六樣本局部圖像對應的第四樣本特征圖；

對所述第四樣本特征圖進行上采樣處理及裁剪處理，獲得第五樣本特征圖；

將所述第三樣本特征圖和所述第五樣本特征圖輸入所述疊加網絡，獲得第六樣本特征圖；

將所述第六樣本特征圖輸入所述激活層進行激活處理，獲得所述樣本圖像的第二樣本目標區域；

根據所述第二樣本目標區域和所述樣本圖像的標注信息，確定所述神經網絡的第二網絡損失；

根據所述第二網絡損失，訓練所述多個特征提取網絡、疊加網絡和激活層，獲得訓練后的多個特征提取網絡、疊加網絡和激活層。