[發明專利]一種超分辨率重建方法、裝置、存儲介質及電子設備

在審

• 申請號: 202011161862.4
• 申請日: 2020-10-26
• 公開（公告）號: CN112200725A
• 公開（公告）日: 2021-01-08
• 發明（設計）人: 黃建軍;李健平;康莉
• 申請（專利權）人: 深圳大學
• 主分類號: G06T3/40
• 分類號: G06T3/40;G06K9/46;G06N3/04
• 代理公司: 北京三聚陽光知識產權代理有限公司 11250
• 代理人: 李靜玉

1.一種超分辨率重建方法，其特征在于，包括：

獲取高分辨率圖像和待處理的低分辨率圖像；

根據聯想記憶網絡建立兩種模態高分辨率圖像的多尺度關聯關系，得到第一種模態高分辨率圖像與第二種模態高分辨率圖像之間的多尺度關聯圖像；

采用多分辨多模態超分辨率重建網絡，將第一種模態高分辨率圖像在聯想記憶網絡中生成的多尺度關聯圖像，與第二種模態的低分辨率圖像進行融合，得到第二種模態的低分辨率圖像對應的超分辨率圖像。

2.根據權利要求1所述的超分辨率重建方法，其特征在于，所述兩種模態高分辨率圖像中，第一種模態高分辨率圖像為T1加權像和第二種模態高分辨率為T2加權像，

根據聯想記憶網絡建立兩種模態高分辨率圖像的多尺度關聯關系，得到第一種模態高分辨率圖像與第二種模態高分辨率圖像之間的多尺度關聯圖像，包括：根據聯想記憶網絡建立高分辨率T1加權像和高分辨率T2加權像多尺度關聯關系，將高分辨率T1加權像分解出多個與高分辨率T2加權像相關的關聯圖像。

3.根據權利要求2所述的超分辨率重建方法，其特征在于，根據聯想記憶網絡建立高分辨率T1加權像和高分辨率T2加權像多尺度關聯關系，將高分辨率T1加權像分解出多個與高分辨率T2加權像相關的關聯圖像，包括：

將所述高分辨率T1加權像進行特征提取、非線性映射以及特征融合得到第一尺度關聯圖像；

將所述第一尺度關聯圖像進行下采樣、特征提取、非線性映射以及特征融合得到第二尺度關聯圖像；

將所述第二尺度關聯圖像進行下采樣、特征提取、非線性映射以及特征融合得到第三尺度關聯圖像。

4.根據權利要求3所述的超分辨率重建方法，其特征在于，還包括：

將所述第三尺度關聯圖像經過上采樣后和所述第二尺度關聯圖像進行特征相加、非線性映射以及特征融合得到第四尺度關聯圖像；

將所述第四尺度關聯圖像經過上采樣后和所述第一尺度關聯圖像進行特征相加、非線性映射以及特征融合得到高分辨率T2加權像。

5.根據權利要求3所述的超分辨率重建方法，其特征在于，所述第二種模態的低分辨率圖像包括第一倍數降分辨率圖像和第二倍數降分辨率圖像，

采用多分辨多模態超分辨率重建網絡，將第一種模態高分辨率圖像在聯想記憶網絡中生成的多尺度關聯圖像，與第二種模態的低分辨率圖像進行融合，得到第二種模態的低分辨率圖像對應的超分辨率圖像，包括：

將所述第一倍數降分辨率圖像進行特性提取后與所述第三尺度關聯圖像進行融合得到第一高分辨率圖像；

將所述第一高分辨率圖像進行上采樣后和所述第二尺度關聯圖像進行特征相加、非線性映射以及特征融合得到第二高分辨率圖像；

將所述第二倍數降分辨率圖像進行特性提取后與所述第二高分辨率圖像進行融合得到第三高分辨率圖像；

將所述第三高分辨率圖像進行上采樣后和所述第一尺度關聯圖像進行特征相加、非線性映射以及特征融合得到低分辨率圖像對應的超分辨率圖像。

6.一種超分辨率重建裝置，其特征在于，包括：

圖像獲取模塊，用于獲取高分辨率圖像和待處理的低分辨率圖像；

多尺度關聯圖像確定模塊，用于根據聯想記憶網絡建立兩種模態高分辨率圖像的多尺度關聯關系，得到第一種模態高分辨率圖像與第二種模態高分辨率圖像之間的多尺度關聯圖像；

融合模塊，用于采用多分辨多模態超分辨率重建網絡，將第一種模態高分辨率圖像在聯想記憶網絡中生成的多尺度關聯圖像，與第二種模態的低分辨率圖像進行融合，得到第二種模態的低分辨率圖像對應的超分辨率圖像。

7.一種計算機可讀存儲介質，其特征在于，所述計算機可讀存儲介質存儲有計算機指令，所述計算機指令用于使所述計算機執行如權利要求1－5任一項所述的超分辨率重建方法。

8.一種電子設備，其特征在于，包括：存儲器和處理器，所述存儲器和所述處理器之間互相通信連接，所述存儲器存儲有計算機指令，所述處理器通過執行所述計算機指令，從而執行如權利要求1－5任一項所述的超分辨率重建方法。