[發(fā)明專利]改進圖像分割學(xué)習(xí)方法和裝置及使用其的測試方法和裝置

有效

• 申請?zhí)枺?/td>: 201811147163.7
• 申請日: 2018-09-29
• 公開（公告）號: CN109598725B
• 公開（公告）日: 2023-05-05
• 發(fā)明（設(shè)計）人: 金镕重;南云鉉;夫碩焄;成明哲;呂東勛;柳宇宙;張?zhí)┬?/a>;鄭景中;諸泓模;趙浩辰
• 申請（專利權(quán)）人: 斯特拉德視覺公司
• 主分類號: G06T7/11
• 分類號: G06T7/11;G06N3/084;G06N3/0464
• 代理公司: 北京東方億思知識產(chǎn)權(quán)代理有限責任公司 11258
• 代理人: 楊佳婧

1.一種用于通過使用學(xué)習(xí)裝置來改進圖像分割的學(xué)習(xí)方法，其中，所述學(xué)習(xí)裝置包括：(i)編碼層，具有通過將一個或多個卷積運算應(yīng)用于作為輸入圖像的訓(xùn)練圖像來分別生成第(1-1)特征圖至第(1-K)特征圖的第(1-1)濾波器至第(1-K)濾波器中的每一個；(ii)解碼層，具有通過將一個或多個去卷積運算應(yīng)用于1-K特征圖來分別生成第(2-K)特征圖至第(2-1)特征圖的第(2-K)濾波器至第(2-1)濾波器中的每一個；以及(iii)第1損失層至第H損失層，分別與包括在所述解碼層中的K個濾波器中的H個濾波器交互，所述學(xué)習(xí)方法包括以下步驟：

(a)如果獲得所述輸入圖像，則所述學(xué)習(xí)裝置通過所述編碼層和所述解碼層獲取或支持另一裝置獲取所述第(2-K)特征圖至第(2-1)特征圖，并且獲取或支持另一裝置從與所述第(2-K)特征圖至第(2-1)特征圖中的從H個所選擇的濾波器獲得的H個特征圖中的每一個分別對應(yīng)的所述第1損失層至所述第H損失層中獲取第1損失至第H損失；以及

(b)在執(zhí)行反向傳播過程時，所述學(xué)習(xí)裝置執(zhí)行以下過程：(1)允許第(2-M)濾波器將卷積運算應(yīng)用于從第(2-(M-1))濾波器中繼的第(M-1)₂調(diào)整特征圖，從而獲得第M₁臨時特征圖；(2)將通過利用所述第M₁臨時特征圖計算第M損失得到的第M₂調(diào)整特征圖中繼至所述第(2-(M+1))濾波器；以及(3)調(diào)整所述第(1-1)濾波器至所述第(1-K)濾波器和所述第(2-K)濾波器至所述第(2-1)濾波器的參數(shù)的至少一部分，其中M是大于或等于2且小于或等于K-1的整數(shù)，

其中，作為所述步驟(b)的初始狀態(tài)，所述第1損失層計算對應(yīng)于所述第(2-1)特征圖的所述第1損失，所述第(2-1)濾波器對所述第1損失應(yīng)用卷積運算從而獲取第1₂調(diào)整特征圖，并且所述第(2-1)濾波器將所述第1₂調(diào)整特征圖中繼至第(2-2)濾波器，

其中，所述學(xué)習(xí)裝置允許與包括在所述編碼層與所述解碼層之間的中間層中的中間濾波器中的每一個分別對應(yīng)的所述第(1-1)特征圖至所述第(1-K)特征圖的至少一部分被輸入到所述中間濾波器中的每一個，并且其中，所述學(xué)習(xí)裝置允許所述第(2-1)濾波器至所述第(2-K)濾波器的至少一部分通過進一步使用從一個或多個中間濾波器獲取的特定特征圖來獲得所述第(2-1)特征圖至所述第(2-K)特征圖的至少一部分，

其中，如果包括第(4-1)濾波器至第(4-K)濾波器的所述中間濾波器執(zhí)行一個或多個擴張卷積運算，則所述學(xué)習(xí)裝置執(zhí)行以下過程：通過所述第(4-1)濾波器至所述第(4-K)濾波器對所述第(1-1)特征圖至所述第(1-K)特征圖中的每一個應(yīng)用所述擴張卷積運算獲得第(4-1)特征圖至第(4-K)特征圖；以及分別將所述第(4-1)特征圖至所述第(4-K)特征圖中繼到所述第(2-1)濾波器至所述第(2-K)濾波器。

2.根據(jù)權(quán)利要求1所述的方法，其中，所述第1損失層至所述第H損失層通過將第1地面真值標簽圖像至第H地面真值標簽圖像與由第(3-1)濾波器至第(3-H)濾波器中的每一個對所述H個特征圖中的每一個應(yīng)用一個或多個卷積運算生成的第(3-1)特征圖至第(3-H)特征圖分別進行比較，來分別計算所述第1損失至所述第H損失。

3.根據(jù)權(quán)利要求2所述的方法，其中，所述第(3-1)濾波器至所述第(3-H)濾波器中的每一個的大小是1×1，并且通過對所述H個特征圖中的每一個應(yīng)用一個或多個卷積運算，所述第(3-1)特征圖至所述第(3-H)特征圖中的每一個的通道數(shù)被控制為等于所述第1地面真值標簽圖像至所述第H地面真值標簽圖像中的每一個的通道數(shù)，并且其中，所述第1地面真值標簽圖像至所述第H地面真值標簽圖像中的每一個的大小被控制為對應(yīng)于所述第(3-1)特征圖至所述第(3-H)特征圖中的每一個的大小。

4.根據(jù)權(quán)利要求3所述的方法，其中，通過分別調(diào)整原始地面真值標簽圖像的通道數(shù)，并通過分別改變所述原始地面真值標簽圖像的大小以使所述原始地面真值標簽圖像的大小與所述H個特征圖中的每一個的大小相匹配，來獲取所述第1地面真值標簽圖像至所述第H地面真值標簽圖像的至少一部分。