[發明專利]視頻去噪方法、裝置、設備及存儲介質

有效

• 申請號: 202110278601.9
• 申請日: 2021-03-16
• 公開（公告）號: CN112686828B
• 公開（公告）日: 2021-07-02
• 發明（設計）人: 張凱皓;羅文寒;劉威
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06N3/04;H04N5/217
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 祝亞男

本申請公開了一種視頻去噪方法、裝置、設備及存儲介質，涉及計算機視覺領域。該方法包括：獲取視頻，視頻的視頻幀序列中存在持續噪點元素，持續噪點元素是在至少兩幀視頻幀上連續出現的噪點元素；提取視頻幀序列的空間特征和時間特征；將空間特征和時間特征進行融合，得到視頻幀序列對應的融合后的時空特征；基于融合后的時空特征對視頻幀序列進行去噪處理，得到處理后的視頻。通過從含有持續噪點元素的視頻幀序列中提取空間特征和時間特征，利用融合后的時空特征對視頻進行去噪處理，得到處理后的視頻，提高了視頻的清晰度。

技術領域

本申請涉及計算機視覺領域，特別涉及一種視頻去噪方法、裝置、設備及存儲介質。

背景技術

在日常生活中，人們常會受到惡劣天氣的影響，比如暴雨天氣、大霧天氣、大雪天氣等，惡劣天氣會對拍攝的圖像或視頻造成干擾。

示意性的，雨滴是惡劣天氣中常見的影響拍攝畫面的因素，雨滴會造成局部區域的遮擋和模糊，導致拍攝出的圖像或視頻出現畫面質量降低，在對該類圖像或視頻進行后續處理時，易于產生不準確的處理結果。相關技術中，以拍攝視頻為例，通過卷積神經網絡對視頻幀中的雨滴元素對應的結構信息進行提取，并根據該結構信息去除視頻幀中的雨滴元素。

上述技術方案中，在一些情況下，視頻的分辨率不高時，卷積神經網絡易于提取出不準確的結構信息，導致對視頻中的雨滴元素進行誤分類，經過去雨處理后的視頻的清晰度不佳。

發明內容

本申請實施例提供了一種視頻去噪方法、裝置、設備及存儲介質，通過從含有持續噪點元素的視頻幀序列中提取空間特征和時間特征，基于融合后的時空特征對視頻幀進行去噪處理，得到處理后的視頻，提高了視頻的清晰度。所述技術方案為如下方案。

根據本申請的一個方面，提供了一種視頻去噪方法，所述方法包括如下步驟：

獲取視頻，所述視頻的視頻幀序列中存在持續噪點元素，所述持續噪點元素是在至少兩幀視頻幀上連續出現的噪點元素；

提取所述視頻幀序列的空間特征和時間特征；

將所述空間特征和所述時間特征進行融合，得到所述視頻幀序列對應的融合后的時空特征；

基于所述融合后的時空特征對所述視頻幀序列進行去噪處理，得到處理后的視頻。

根據本申請的另一方面，提供了一種視頻去噪裝置，所述裝置包括如下部分：

獲取模塊，用于獲取視頻，所述視頻的視頻幀序列中存在持續噪點元素，所述持續噪點元素是在至少兩幀視頻幀上連續出現的噪點元素；

特征提取模塊，用于提取所述視頻幀序列的空間特征和時間特征；

特征融合模塊，用于將所述空間特征和所述時間特征進行融合，得到所述視頻幀序列對應的融合后的時空特征；

去噪模塊，用于基于所述融合后的時空特征對所述視頻幀序列進行去噪處理，得到處理后的視頻。

根據本申請的另一方面，提供了一種計算機設備，所述計算機設備包括：處理器和存儲器，所述存儲器中存儲有至少一條指令、至少一段程序、代碼集或指令集，所述至少一條指令、所述至少一段程序、所述代碼集或指令集由所述處理器加載并執行以實現如上方面所述的視頻去噪方法。

根據本申請的另一方面，提供了一種計算機可讀存儲介質，所述可讀存儲介質中存儲有至少一條指令、至少一段程序、代碼集或指令集，所述至少一條指令、所述至少一段程序、所述代碼集或指令集由處理器加載并執行以實現如上述方面所述的視頻去噪方法。