[發明專利]一種圖像降噪方法、裝置及電子設備

在審

• 申請號: 202310219961.0
• 申請日: 2023-03-08
• 公開（公告）號: CN116258648A
• 公開（公告）日: 2023-06-13
• 發明（設計）人: 劉建偉
• 申請（專利權）人: 愛芯元智半導體（上海）有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06T7/20;G06N3/04
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 唐正瑜

本申請提供一種圖像降噪方法、裝置及電子設備，方法包括：將相鄰圖像組輸入運動檢測架構中，得到運動檢測架構輸出的與相鄰圖像組對應的第一運動掩膜；其中，相鄰圖像組包括待降噪圖像以及待降噪圖像的前一幀圖像，運動檢測架構包括多層運動檢測網絡，多層運動檢測網絡用于對相鄰圖像組進行多尺度的運動檢測，且多層運動檢測網絡之間存在信息傳遞；根據第一運動掩膜對待降噪圖像進行降噪，得到與待降噪圖像對應的第二降噪圖像。通過將相鄰圖像組輸入運動檢測架構中，實現對相鄰幀進行多尺度下的運動檢測，且多尺度之間存在信息流通，從而可以提高相鄰幀之間運動檢測的準確率。因此，可以提高對圖像進行降噪的效果。

技術領域

本申請涉及圖像處理技術領域，具體而言，涉及一種圖像降噪方法、裝置及電子設備。

背景技術

在圖像采集裝置的成像過程中，噪聲水平成為影響圖像質量的核心因素之一。舉例來說，圖像的噪聲水平會顯著影響人眼的觀感和通過圖像對信息的獲取能力；以及，過高的噪聲水平增加了后續圖像結構化算法的錯誤率。

在現有技術中，對圖像進行降噪的方式可以包括單幀降噪和多幀降噪，其中，多幀降噪由于利用相鄰幀的信息進行降噪，因此可以具有更好的幀間平滑性。根據采用的具體算法，上述兩種方式內又可以分為傳統降噪和神經網絡降噪兩種方式，其中，神經網絡的方式往往優于傳統的方式。但是，若將多幀降噪與神經網絡降噪進行結合，其對于多幀圖像之間運動檢測的準確率較低，從而導致降噪的效果較差。

發明內容

本申請實施例的目的在于提供一種圖像降噪方法、裝置及電子設備，用以解決現有技術中對于多幀圖像之間運動檢測的準確率較低，從而導致降噪的效果較差的技術問題。

第一方面，本申請實施例提供一種圖像降噪方法，包括：將相鄰圖像組輸入運動檢測架構中，得到所述運動檢測架構輸出的與所述相鄰圖像組對應的第一運動掩膜；其中，所述相鄰圖像組包括待降噪圖像以及所述待降噪圖像的前一幀圖像，所述運動檢測架構包括多層運動檢測網絡，所述多層運動檢測網絡用于對所述相鄰圖像組進行多尺度的運動檢測，且所述多層運動檢測網絡之間存在信息傳遞；根據所述第一運動掩膜對所述待降噪圖像進行降噪，得到與所述待降噪圖像對應的第二降噪圖像。

在上述方案中，通過將相鄰圖像組輸入運動檢測架構中，實現對相鄰幀之間的運動檢測。在上述運動檢測的過程中，對相鄰幀進行多尺度下的運動檢測，且多尺度之間存在信息流通，從而可以提高相鄰幀之間運動檢測的準確率。因此，可以提高對圖像進行降噪的效果。

在可選的實施方式中，所述將相鄰圖像組輸入運動檢測架構中，得到所述運動檢測架構輸出的與所述相鄰圖像組對應的第一運動掩膜，包括：將所述第一層運動檢測網絡對應的處理圖像組輸入所述第一層運動檢測網絡中，得到所述第一層運動檢測網絡輸出的第一運動掩膜；其中，每層運動檢測網絡對應的處理圖像組包括對所述待降噪圖像以及所述前一幀圖像進行下采樣后得到的圖像，所述多層運動檢測網絡對應的分辨率逐層升高；從第二層運動檢測網絡開始至倒數第二層運動檢測網絡，依次將該層對應的處理圖像組以及上一層運動檢測網絡對應的第二運動掩膜輸入該層運動檢測網絡中，得到該層運動檢測網絡輸出的第一運動掩膜；其中，所述上一層運動檢測網絡對應的第二運動掩膜為對所述上一層運動檢測網絡對應的第一運動掩膜進行上采樣后得到圖像，所述第二運動掩膜的分辨率等于所述上一層運動檢測網絡對應的處理圖像組的分辨率；將所述相鄰圖像組以及上一層運動檢測網絡對應的第二運動掩膜輸入最后一層運動檢測網絡中，得到所述最后一層運動檢測網絡輸出的第一運動掩膜。

在上述方案中，運動檢測架構中可以包括多層運動檢測網絡，上述多層運動檢測網絡可以對相鄰幀進行多尺度下的運動檢測。上一層運動檢測網絡輸出的第一運動掩膜會作為下一層運動檢測網絡的輸入，從而可以減少第一層運動檢測網絡的計算量；此外，上一層運動檢測網絡輸出的第一運動掩膜作為下一層運動檢測網絡的輸入，還可以實現多層運動檢測網絡之間的信息流通，從而可以提高相鄰幀之間運動檢測的準確率。因此，可以在降低計算量的基礎上提高對圖像進行降噪的效果。