[發(fā)明專利]圖像處理方法、裝置、存儲介質(zhì)及電子設備

在審

• 申請?zhí)枺?/td>: 202210377047.4
• 申請日: 2022-04-11
• 公開（公告）號: CN114742738A
• 公開（公告）日: 2022-07-12
• 發(fā)明（設計）人: 郭孟曦;趙世杰;李躍;李軍林;張莉;王悅
• 申請（專利權）人: 北京字節(jié)跳動網(wǎng)絡技術有限公司
• 主分類號: G06T5/20
• 分類號: G06T5/20;G06T3/40;G06N3/04
• 代理公司: 北京遠智匯知識產(chǎn)權代理有限公司 11659
• 代理人: 魯艷萍

1.一種圖像處理方法，其特征在于，包括：

獲取原始圖像，提取所述原始圖像中的高頻信息和低頻信息；

提取所述高頻信息中的內(nèi)容相關信息，將所述內(nèi)容相關信息寫入所述低頻信息中，得到所述原始圖像對應的低分辨率圖像。

2.根據(jù)權利要求1所述的方法，其特征在于，所述提取所述高頻信息中的內(nèi)容相關信息，包括：

基于預先訓練的信息提取模型對所述高頻信息進行處理，得到所述高頻信息中的內(nèi)容相關信息和內(nèi)容無關信息。

3.根據(jù)權利要求2所述的方法，其特征在于，所述信息提取模型為注意力可逆變換網(wǎng)絡模型；

所述基于預先訓練的信息提取模型對所述高頻信息進行處理，得到所述高頻信息中的內(nèi)容相關信息和內(nèi)容無關信息，包括：

將所述高頻信息和所述低頻信息輸入至所述注意力可逆變換網(wǎng)絡模型中，得到所述高頻信息中的內(nèi)容相關信息和內(nèi)容無關信息，其中，所述低頻信息為對所述高頻信息進行內(nèi)容相關信息提取的輔助條件。

4.根據(jù)權利要求1所述的方法，其特征在于，所述將所述內(nèi)容相關信息寫入所述低頻信息中，得到所述原始圖像對應的低分辨率圖像，包括：

將所述內(nèi)容相關信息和所述低頻信息在通道維度上進行數(shù)據(jù)融合，得到原始圖像對應的低分辨率圖像。

5.根據(jù)權利要求4所述的方法，其特征在于，所述將所述內(nèi)容相關信息和所述低頻信息在通道維度上進行數(shù)據(jù)融合，包括：

確定低頻信息中各第一通道數(shù)據(jù)，對應的所述內(nèi)容相關信息中的至少一個第二通道數(shù)據(jù)；將具有對應關系的第一通道數(shù)據(jù)和所述第二通道數(shù)據(jù)進行數(shù)據(jù)融合。

6.根據(jù)權利要求1所述的方法，其特征在于，所述提取所述原始圖像中的高頻信息和低頻信息，包括：

對所述原始圖像進行下采樣，得到低頻信息；基于所述原始圖像和所述低頻信息上采樣得到的高分辨率低頻圖像確定初始高頻信息，對所述初始高頻信息中的空間像素重排至通道維度，得到與所述低頻信息相匹配的高頻信息；

或者，

對所述原始圖像進行濾波變換，得到所述原始圖像中的高頻信息和低頻信息。

7.一種圖像處理方法，其特征在于，包括：

獲取低分辨率圖像，基于所述低分辨率圖像提取低頻信息和高頻信息中的內(nèi)容相關信息；

基于所述內(nèi)容相關信息確定所述高頻信息，并基于所述高頻信息和所述低頻信息融合得到所述低分辨率圖像對應的原始圖像。

8.根據(jù)權利要求7所述的方法，其特征在于，所述基于所述低分辨率圖像提取低頻信息和高頻信息中的內(nèi)容相關信息，包括：

確定所述低頻信息中各數(shù)據(jù)通道與所述低分辨率圖像中各數(shù)據(jù)通道的對應關系，基于所述低分辨率圖像中各通道數(shù)據(jù)確定所述低頻信息的各第一通道數(shù)據(jù)；

確定所述內(nèi)容相關信息中各數(shù)據(jù)通道與所述低分辨率圖像中各數(shù)據(jù)通道的對應關系，基于所述低分辨率圖像中各通道數(shù)據(jù)確定所述內(nèi)容相關信息的各第二通道數(shù)據(jù)。

9.根據(jù)權利要求8所述的方法，其特征在于，所述基于所述低分辨率圖像中各通道數(shù)據(jù)確定所述低頻信息的各第一通道數(shù)據(jù)，包括：

將所述低分辨率圖像中各通道數(shù)據(jù)進行數(shù)據(jù)復制，作為所述低頻信息中對應數(shù)據(jù)通道的第一通道數(shù)據(jù)；

以及，基于所述低分辨率圖像中各通道數(shù)據(jù)確定所述內(nèi)容相關信息的各第二通道數(shù)據(jù)，包括：

將所述低分辨率圖像中各通道數(shù)據(jù)進行數(shù)據(jù)復制，作為所述內(nèi)容相關信息中對應數(shù)據(jù)通道的第二通道數(shù)據(jù)。

10.根據(jù)權利要求1所述的方法，其特征在于，在基于所述內(nèi)容相關信息確定所述高頻信息之前，所述方法還包括：

在內(nèi)容無關信息對應的預設數(shù)據(jù)分布中，進行信息重采樣，得到內(nèi)容無關信息；

相應的，基于所述內(nèi)容相關信息確定所述高頻信息，包括：

基于所述內(nèi)容相關信息和重采樣得到的內(nèi)容無關信息確定所述高頻信息。