[發明專利]圖像處理的方法及裝置

有效

• 申請號: 202011565601.9
• 申請日: 2020-09-04
• 公開（公告）號: CN112633185B
• 公開（公告）日: 2023-04-18
• 發明（設計）人: 勞江微;汪佳;王劍;陳景東;顧欣欣;孫劍哲;甘利民;余泉;孫曉冬
• 申請（專利權）人: 支付寶（杭州）信息技術有限公司
• 主分類號: G06V20/10
• 分類號: G06V20/10;G06V20/70;G06V10/80;G06V10/764;G06V10/82;G06N3/0464;G06N3/08;G06T3/40
• 代理公司: 北京億騰知識產權代理事務所(普通合伙) 11309
• 代理人: 陳霽;周良玉

1.一種圖像處理的方法，用于從光譜遙感圖像中識別預定目標，所述預定目標包括植被、水體中的至少一項，所述方法包括：

獲取待處理的光譜遙感圖像；

檢測所述待處理的光譜遙感圖像中是否存在云團或云影，在存在的情況下進行去云團處理或云影去除處理；

將所述待處理的光譜遙感圖像按照預定尺寸和預定步長，切割為若干待處理圖像；

針對各個待處理圖像的各個圖像通道，分別執行標準化操作，針對單個圖像通道，所述標準化操作用于將各個像元對應的通道值限定在預定范圍，所述圖像通道包括近紅外通道；

基于預先訓練的卷積神經網絡，對所述若干待處理圖像分別進行語義分割，得到基于語義分割的各個目標識別結果，其中，針對單個待處理圖像通過以下方式進行語義分割：通過分辨率縮小或放大得到多個分辨率下的圖像，以便于對不同目標類別或不同尺寸的目標進行識別；針對各個分辨率下的圖像分別進行語義分割，得到各個語義分割結果；將各個語義分割結果融合得到所述單個待處理圖像對應的單個目標識別結果；

將各個目標識別結果按照若干待處理圖像的位置關系進行拼接，得到針對所述待處理的光譜遙感圖像在預定目標上的識別結果。

2.根據權利要求1所述的方法，其中，所述針對各個待處理圖像的各個圖像通道，分別執行標準化操作包括：

針對單個待處理圖像，將各個像元在單個圖像通道上分別對應的通道值，減去相應的通道均值，得到所述單個圖像通道對應的通道差值；

根據所述通道差值與所述單個圖像通道對應的通道方差，確定各個像元在所述單個圖像通道上的標準化值。

3.根據權利要求1所述的方法，其中，所述將各個語義分割結果融合得到所述單個待處理圖像對應的單個目標識別結果包括：

針對各個分辨率下的圖像，在進行語義分割的同時，利用得到語義分割結果之前的處理數據確定各個語義分割結果分別對應的各個注意力圖，所述注意力圖指示出針對所述待處理圖像，各個像元各自對應的相應語義分割結果的重要程度；

將各個分辨率下的圖像分別對應的各個語義分割結果，基于各個注意力圖進行融合，從而得到該單個待處理圖像對應的單個目標識別結果。

4.根據權利要求3所述的方法，其中，所述將各個分辨率下的圖像分別對應的各個語義分割結果，基于各個注意力圖進行融合，從而得到該單個待處理圖像對應的單個目標識別結果包括：

將各個語義分割結果分別與相應注意力圖相乘，得到各個相乘結果；

根據對各個相乘結果的疊加，得到該單個待處理圖像對應的單個目標識別結果。

5.一種圖像處理的裝置，用于從光譜遙感圖像中識別預定目標，所述預定目標包括植被、水體中的至少一項，所述裝置包括以下單元：

圖像獲取單元：獲取待處理的光譜遙感圖像；

去云處理單元：檢測所述待處理的光譜遙感圖像中是否存在云團或云影，在存在的情況下進行去云團處理或云影去除處理；

切割單元：將所述待處理的光譜遙感圖像按照預定尺寸和預定步長，切割為若干待處理圖像；

標準化單元：針對各個待處理圖像的各個圖像通道，分別執行標準化操作，針對單個圖像通道，所述標準化操作用于將各個像元對應的通道值限定在預定范圍，所述圖像通道包括近紅外通道；

語義分割單元：基于預先訓練的卷積神經網絡，對所述切割操作確定的若干待處理圖像分別進行語義分割，得到基于語義分割的各個目標識別結果，其中，針對單個待處理圖像通過以下方式進行語義分割：通過分辨率縮小或放大得到多個分辨率下的圖像，以便于對不同目標類別或不同尺寸的目標進行識別；針對各個分辨率下的圖像分別進行語義分割，得到各個語義分割結果；將各個語義分割結果融合得到所述單個待處理圖像對應的單個目標識別結果；

結果拼接單元：將各個目標識別結果按照若干待處理圖像的位置關系進行拼接，得到針對所述待處理的光譜遙感圖像在預定目標上的識別結果。