[發明專利]圖像的預測方法、裝置、設備及可讀存儲介質

在審

• 申請號: 202110304328.2
• 申請日: 2021-03-22
• 公開（公告）號: CN113706443A
• 公開（公告）日: 2021-11-26
• 發明（設計）人: 鄭瀚;常健博;王任直;馮銘;尚鴻;姚建華;王曉寧;裴翰奇;陳星翰
• 申請（專利權）人: 騰訊科技（深圳）有限公司;中國醫學科學院北京協和醫院
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06T7/11;G06T5/00;G06T11/00;G06K9/62;G06N20/00
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 祝亞男

1.一種圖像的預測方法，其特征在于，所述方法包括：

獲取掃描圖像，所述掃描圖像中包括與異常生命狀態對應的第一異常區域，所述第一異常區域為發展情況待預測的區域；

對所述掃描圖像中的像素點進行位移預測，得到所述掃描圖像的預測形變場，所述預測形變場中包括所述掃描圖像中的像素點的位移預測結果；

將所述預測形變場作用于所述掃描圖像，得到預測圖像，所述預測圖像中包括與所述異常生命狀態對應的第二異常區域，所述第二異常區域為在所述第一異常區域的基礎上，對所述異常生命狀態的發展情況進行預測得到的區域。

2.根據權利要求1所述的方法，其特征在于，所述對所述掃描圖像中的像素點進行位移預測，得到所述掃描圖像的預測形變場，包括：

將所述掃描圖像輸入至形變網絡，所述形變網絡為預先訓練的用于對所述異常生命狀態進行發展預測的網絡；

通過所述形變網絡對所述掃描圖像中的像素點進行位移預測，得到所述掃描圖像的所述預測形變場。

3.根據權利要求2所述的方法，其特征在于，所述通過所述形變網絡對所述掃描圖像中的像素點進行位移預測，得到所述掃描圖像的所述預測形變場，包括：

通過所述形變網絡在預設維度上對所述掃描圖像中的像素點進行位移預測，其中，所述預設維度包括第一平面維度、第二平面維度和掃描層厚維度；

基于在所述第一平面維度的第一位移預測結果、在第二平面維度的第二位移預測結果，和在所述掃描層厚維度的第三位移預測結果，得到所述掃描圖像的所述預測形變場。

4.根據權利要求2所述的方法，其特征在于，所述形變網絡的訓練過程包括：

獲取樣本圖像對，所述樣本圖像對中包括第一圖像和第二圖像，所述第一圖像為在第一時刻對所述異常生命狀態進行掃描得到的圖像，所述第一圖像中包括第一樣本區域，所述第二圖像為在第二時刻對所述異常生命狀態進行掃描得到的圖像，所述第二圖像中包括第二樣本區域，且所述第二時刻在所述第一時刻之后；

將所述第一圖像輸入至所述形變網絡，輸出得到樣本形變場；

將所述樣本形變場作用于所述第一圖像，得到樣本預測圖像；

基于所述樣本預測圖像與所述第二圖像之間的差異度，對所述形變網絡進行訓練。

5.根據權利要求4所述的方法，其特征在于，所述將所述第一圖像輸入至所述形變網絡之前，還包括：

以所述第一圖像和所述第二圖像之間的對齊關系為目標，對所述第一圖像和所述第二圖像進行預處理。

6.根據權利要求5所述的方法，其特征在于，所述以所述第一圖像和所述第二圖像之間的對齊關系為目標，對所述第一圖像和所述第二圖像進行預處理，包括：

基于所述第一樣本區域在所述第一圖像中的區域范圍對所述第一圖像進行裁剪；

基于所述第二樣本區域在所述第二圖像中的區域范圍對所述第二圖像進行裁剪；

以所述第一圖像和所述第二圖像之間的對齊關系為目標，對裁剪后的第一圖像和裁剪后的第二圖像進行配準對齊處理。

7.根據權利要求6所述的方法，其特征在于，所述以所述第一圖像和所述第二圖像之間的對齊關系為目標，對裁剪后的第一圖像和裁剪后的第二圖像進行配準對齊處理，包括：

以所述第一樣本區域和所述第二樣本區域位置對齊為目標，將裁剪后的第一圖像和裁剪后的第二圖像配準至相同采集角度；

將裁剪后的第一圖像和裁剪后的第二圖像配準至相同掃描層厚。

8.根據權利要求4所述的方法，其特征在于，所述基于所述樣本預測圖像與所述第二圖像之間的差異度，對所述形變網絡進行訓練，包括：

獲取所述樣本形變場的形變平滑度，所述形變平滑度用于表示所述第一圖像中的像素點在所述樣本形變場中的位移連貫程度；

基于所述樣本預測圖像與所述第二圖像之間的差異度以及所述形變平滑度，對所述形變網絡進行訓練。