[發明專利]圖像處理方法、裝置及電子設備

在審

• 申請號: 202211676857.6
• 申請日: 2022-12-26
• 公開（公告）號: CN116228557A
• 公開（公告）日: 2023-06-06
• 發明（設計）人: 周杰旻
• 申請（專利權）人: 愛芯元智半導體（上海）有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06T5/50;G06T7/207
• 代理公司: 北京清亦華知識產權代理事務所(普通合伙) 11201
• 代理人: 張大威

本公開提出一種圖像處理方法、裝置及電子設備，其中，方法包括：獲取當前幀圖像以及當前幀圖像的前一幀圖像對應的第一濾波圖像；基于經過訓練的運動估計模型，根據當前幀圖像以及第一濾波圖像，生成第一運動估計圖；對當前幀圖像與第一濾波圖像進行差分運算，以得到第二運動估計圖；根據第一運動估計圖和第二運動估計圖，生成第三運動估計圖；根據第三運動估計圖，對當前幀圖像進行時域濾波處理，以得到當前幀圖像對應的第二濾波圖像，由此，通過第一運動估計圖與第二運動估計圖相結合，生成第三運動估計圖，提高了運動估計的準確性，從而基于第三運動估計圖進行時域濾波，可提升時域濾波的畫質。

技術領域

本公開涉及圖像處理技術領域，尤其涉及一種圖像處理方法、裝置及電子設備。

背景技術

在圖像處理領域，時域濾波(時域降噪)是一種常用的手段。所謂時域濾波，即利用不同時刻獲得的多張不同幀的圖像(通常為過去的數幀圖像)，對當前幀的圖像進行降噪處理。由于時域濾波有一定的應用條件，即，要求參與降噪的多張不同幀的圖像(或圖像的局部)，和當前幀的圖像(或圖像的局部)保持相對靜止。如果參與濾波的時域圖像不滿足此要求，那么時域濾波后的結果上會出現明顯的重影，鬼影。

目前，相關技術中采用圖像信號處理(Image?Signal?Processing，簡稱ISP)中的運動估計算法進行時域濾波，但是由于圖像信號處理中的運動估計算法受限于圖像感受野小，處理復雜度低等原因，無法準確的進行運動估計，最終可能導致運動區域出現重影，鬼影，或者，非運動區域無法應用時域濾波導致噪聲偏大等畫質問題。

發明內容

本公開旨在至少在一定程度上解決相關技術中的技術問題之一。

為此，本公開提出一種圖像處理方法、裝置及電子設備，可實現將運動估計模型生成的第一運動估計圖和當前幀圖像與第一濾波圖像差分運算所生成的第二運動估計圖相結合，生成第三運動估計圖，提高了運動估計的準確性，從而基于第三運動估計圖進行時域濾波，可提升時域濾波的畫質。

根據本公開的第一方面，提供了一種圖像處理方法，包括：獲取當前幀圖像以及所述當前幀圖像的前一幀圖像對應的第一濾波圖像；基于經過訓練的運動估計模型，根據所述當前幀圖像以及所述第一濾波圖像，生成第一運動估計圖；對所述當前幀圖像與所述第一濾波圖像進行差分運算，以得到第二運動估計圖；根據所述第一運動估計圖和所述第二運動估計圖，生成第三運動估計圖；根據所述第三運動估計圖，對所述當前幀圖像進行時域濾波處理，以得到所述當前幀圖像對應的第二濾波圖像。

根據本公開實施例的第二方面，提供了一種圖像處理裝置，包括：獲取模塊，用于獲取當前幀圖像以及所述當前幀圖像的前一幀圖像對應的第一濾波圖像；第一生成模塊，用于基于經過訓練的運動估計模型，根據所述當前幀圖像以及所述第一濾波圖像，生成第一運動估計圖；第二生成模塊，用于對所述當前幀圖像與所述第一濾波圖像進行差分運算，以得到第二運動估計圖；第三生成模塊，用于根據所述第一運動估計圖和所述第二運動估計圖，生成第三運動估計圖；處理模塊，用于根據所述第三運動估計圖，對所述當前幀圖像進行時域濾波處理，以得到所述當前幀圖像對應的第二濾波圖像。

根據本公開的第三方面，提供了一種電子設備，包括：至少一個處理器；以及與所述至少一個處理器通信連接的存儲器；其中，所述存儲器存儲有可被所述至少一個處理器執行的指令，所述指令被所述至少一個處理器執行，以使所述至少一個處理器能夠執行本公開第一方面實施例提出的圖像處理方法。

根據本公開的第四方面，提供了一種計算機可讀存儲介質，當所述計算機可讀存儲介質中的指令由電子設備的處理器執行時，使得所述電子設備能夠執行本公開第一方面實施例提出的圖像處理方法。

根據本公開的第五方面，提供了一種計算機程序產品，包括計算機程序，當所述計算機程序由電子設備的處理器執行時，使得所述電子設備能夠執行第一方面實施例提出的圖像處理方法。