[發明專利]一種圖像處理方法、裝置、設備及可讀存儲介質

在審

• 申請號: 202310410179.7
• 申請日: 2023-04-17
• 公開（公告）號: CN116524295A
• 公開（公告）日: 2023-08-01
• 發明（設計）人: 歐陽熹;顧冬冬;薛忠;劉羽軒
• 申請（專利權）人: 上海聯影智能醫療科技有限公司
• 主分類號: G06V10/774
• 分類號: G06V10/774;G06V10/40;G06V10/80;G06V10/764;G06V20/70
• 代理公司: 北京博思佳知識產權代理有限公司 11415
• 代理人: 張相欽

1.一種圖像處理方法，其特征在于，圖像處理模型包括預訓練的特征提取單元和多個類型的預測單元；其中，不同類型的預測單元對應于不同類型的圖像處理任務；所述方法包括：

響應于圖像處理請求，獲取待處理的醫學圖像；

將所述待處理的醫學圖像輸入到所述圖像處理模型，通過所述特征提取單元得到所述待處理的醫學圖像的目標特征；

根據所述圖像處理請求對應的圖像處理任務，從各類型的預測單元中選擇目標類型的預測單元；

將所述待處理的醫學圖像的目標特征輸入所述目標類型的預測單元，得到所述目標類型的預測單元輸出的所述待處理的醫學圖像的預測結果；

其中，所述圖像處理模型中的特征提取單元是基于無標注的醫學圖像預訓練得到的，所述圖像處理模型中各類型的預測單元是分別基于預訓練的特征提取單元和帶各類型的標注的醫學圖像訓練得到的。

2.如權利要求1所述的方法，其特征在于，所述特征提取單元包括編碼器和解碼器；

將所述待處理的醫學圖像輸入到所述圖像處理模型，通過所述特征提取單元得到所述待處理的醫學圖像的目標特征，具體包括：

將所述待處理的醫學圖像輸入到所述圖像處理模型，通過所述編碼器得到第一特征圖和第二特征圖，其中，所述第一特征圖的尺寸大于所述第二特征圖的尺寸；

將所述第一特征圖和所述第二特征圖分別輸入所述解碼器，得到所述待處理的醫學圖像的第一特征和所述待處理的醫學圖像的第二特征；

將所述第一特征和所述第二特征進行特征融合，得到所述待處理的醫學圖像的目標特征。

3.如權利要求2所述的方法，其特征在于，將所述待處理的醫學圖像的目標特征輸入所述目標類型的預測單元，得到所述目標類型的預測單元輸出的所述待處理的醫學圖像的預測結果之前，所述方法還包括：

判斷所述待處理醫學圖像的目標特征是否滿足預設條件；

若否，通過所述編碼器重新得到第二特征圖，將重新得到的第二特征圖輸入所述解碼器，重新確定第二特征，并根據重新確定的第二特征和上一次特征融合得到的目標特征，重新進行特征融合得到重新確定的目標特征，直到所述目標特征滿足所述預設條件；

其中，所述重新得到的第二特征圖的尺寸小于上一次得到的第二特征圖的尺寸。

4.如權利要求1所述的方法，其特征在于，將所述待處理的醫學圖像的目標特征輸入所述目標類型的預測單元，得到所述目標類型的預測單元輸出的所述待處理的醫學圖像的預測結果之前，所述方法還包括：

將所述待處理醫學圖像輸入特征提取單元中的解碼器，得到所述解碼器輸出的所述待處理醫學圖像的第三特征；

將所述待處理的醫學圖像的目標特征輸入所述目標類型的預測單元，得到所述目標類型的預測單元輸出的所述待處理的醫學圖像的預測結果，具體包括：

將所述待處理醫學圖像的目標特征以及所述第三特征作為輸入，輸入到所述目標類型的預測層，得到所述目標類型的預測層輸出的所述待處理醫學圖像的預測結果。

5.如權利要求1所述的方法，其特征在于，所述各類型的預測單元通過下述方式訓練得到：

將獲取到的帶標注的醫學圖像作為第二訓練樣本，并確定所述第二訓練樣本對應于各類型的圖像處理任務的標注；

將所述第二訓練樣本輸入預訓練的特征提取單元，得到所述特征提取單元輸出的所述第二訓練樣本的目標特征；

針對每個類型，將所述第二訓練樣本的目標特征輸入該類型的預測單元，得到該類型的預測單元輸出的預測結果；

根據該類型的預測單元輸出的預測結果，以及所述第二訓練樣本對應于該類型的圖像處理任務的標注，訓練該類型的預測單元。

6.如權利要求5所述的方法，其特征在于，根據該類型的預測單元輸出的預測結果，以及所述第二訓練樣本對應于該類型的圖像處理任務的標注，訓練該類型的預測單元，具體包括：

根據該類型的預測單元輸出的預測結果，以及所述第二訓練樣本對應于該類型的圖像處理任務的標注，確定該類型的損失；

以該類型的損失最小化為訓練目標，訓練該類型的預測層。