[發明專利]圖像處理方法和裝置、電子設備以及計算機可讀存儲介質

在審

• 申請號: 202010120903.9
• 申請日: 2020-02-26
• 公開（公告）號: CN113313788A
• 公開（公告）日: 2021-08-27
• 發明（設計）人: 邢達明;武小軍
• 申請（專利權）人: 北京小米移動軟件有限公司
• 主分類號: G06T11/60
• 分類號: G06T11/60;G06T7/194
• 代理公司: 北京鉦霖知識產權代理有限公司 11722
• 代理人: 李英艷;李志新

本公開是關于一種圖像處理方法及裝置。圖像處理方法，應用于電子設備，包括：利用電子設備的拍攝或從相冊選取視頻，視頻包括當前幀圖像、以及當前幀圖像向前的一個或多個前序幀圖像；確定視頻中的主體；基于所確定的主體，通過語義分割算法，得到當前幀圖像的主體區域、及當前幀圖像和前序幀圖像的背景區域；基于當前幀圖像和前序幀圖像的背景區域，得到當前幀圖像的殘影圖像；將當前幀圖像的主體區域和當前幀圖像的殘影圖像進行融合，得到當前幀圖像的輸出圖像。通過語義分割算法得到主體區域和背景區域，經過幀間融合形成殘影圖像與當前幀圖像的主體區域融合得到輸出圖像，能在任何環境和條件下拍攝并形成高質量的具有殘影效果的圖片或視頻。

技術領域

本公開涉及圖像處理領域，尤其涉及圖像處理方法、圖像處理裝置、電子設備以及計算機可讀存儲介質。

背景技術

目前在一些拍攝需求中，通過延時攝影展現運動物體產生的拖影效果的圖像，或稱殘影。延時攝影是通過延長圖像傳感器的曝光時間，當拍攝畫面變化時，從拍攝對象反射的光線，將在圖像傳感器上持續曝光(成像)呈現連續的移動軌跡，但由于攝像設備感光的限制，無法在光線充足的條件下直接采用延時攝影，或拍攝出的圖像效果不理想。

發明內容

為克服相關技術中存在的問題，本公開提供一種圖像處理方法、圖像處理裝置、電子設備以及計算機可讀存儲介質。

根據本公開實施例的第一方面，提供一種圖像處理方法，應用于電子設備，圖像處理包括：利用電子設備的攝像裝置拍攝一段視頻或者從電子設備的相冊中選取一段視頻，其中，視頻包括當前幀圖像、以及當前幀圖像向前的一個或多個前序幀圖像；確定視頻中的主體；基于所確定的主體，通過語義分割算法，得到當前幀圖像的主體區域、以及當前幀圖像和前序幀圖像的背景區域；基于當前幀圖像和前序幀圖像的背景區域，得到當前幀圖像的殘影圖像；將當前幀圖像的主體區域和當前幀圖像的殘影圖像進行融合，得到當前幀圖像的輸出圖像。

在一實施例中，確定視頻中的主體，包括：響應于外部指令，確定視頻中任一幀的主體；基于視頻幀中任一幀的主體，通過目標追蹤算法，確定視頻中的主體。

在一實施例中，基于當前幀圖像和前序幀圖像的背景區域，得到當前幀圖像的殘影圖像，包括：將當前幀圖像的背景區域、以及當前幀圖像依次向前預設數量的前序幀圖像的背景區域進行卷積，得到當前幀圖像的殘影圖像。

在一實施例中，基于當前幀圖像和前序幀圖像的背景區域，得到當前幀圖像的殘影圖像，包括：將當前幀圖像的背景區域、以及與當前幀圖像相鄰的前序幀圖像的殘影圖像進行加權融合，得到當前幀圖像的殘影圖像。

在一實施例中，將當前幀圖像的主體區域和當前幀圖像的殘影圖像進行融合，得到當前幀圖像的輸出圖像，包括：當前幀圖像的主體區域的邊緣與當前幀圖像的殘影圖像進行邊緣融合。

根據本公開實施例的第二方面，提供一種圖像處理裝置，應用于電子設備，圖像處理裝置包括：獲取單元，用于利用電子設備的攝像裝置拍攝一段視頻或者從電子設備的相冊中選取一段視頻，其中，視頻包括當前幀圖像、以及當前幀圖像向前的一個或多個前序幀圖像；確認單元，用于確定視頻幀中的主體；分割單元，用于基于所確定的主體，通過語義分割算法，得到當前幀圖像的主體區域、以及當前幀圖像和前序幀圖像的背景區域；幀間融合單元，用于基于當前幀圖像和前序幀圖像的背景區域，得到當前幀圖像的殘影圖像；當前幀圖像融合單元，用于將當前幀圖像的主體區域和當前幀圖像的殘影圖像進行融合，得到當前幀圖像的輸出圖像。

在一實施例中，確認單元用于：響應于外部指令，確定視頻中任一幀的主體；基于視頻中任一幀的主體，通過目標追蹤算法，確定視頻中的主體。

在一實施例中，幀間融合單元用于：將當前幀圖像的背景區域、以及當前幀圖像依次向前預設數量的前序幀圖像的背景區域進行卷積，得到當前幀圖像的殘影圖像。