[發明專利]一種視頻幀處理方法、裝置、電子設備及存儲介質

在審

• 申請號: 202110926912.1
• 申請日: 2021-08-12
• 公開（公告）號: CN113706555A
• 公開（公告）日: 2021-11-26
• 發明（設計）人: 王學博
• 申請（專利權）人: 北京達佳互聯信息技術有限公司
• 主分類號: G06T7/11
• 分類號: G06T7/11
• 代理公司: 北京東方億思知識產權代理有限責任公司 11258
• 代理人: 桂艷球

本公開公開了一種視頻幀處理方法、裝置、電子設備及存儲介質，屬于視頻處理技術領域。方法包括：獲取視頻的第一視頻幀，所述第一視頻幀包括待分割對象；獲取所述視頻的第二視頻幀中第一分割圖像的位置信息，所述第二視頻幀為所述第一視頻幀之前的視頻幀，所述第一分割圖像為：針對所述第二視頻幀中所述待分割對象進行圖像分割得到的圖像；基于所述第一分割圖像的位置信息，確定所述第一視頻幀中的感興趣圖像區域，其中，所述感興趣圖像區域包括所述待分割對象的圖像區域；將所述感興趣圖像區域的圖像輸入至圖像分割網絡中，得到所述待分割對象在所述第一視頻幀中的第二分割圖像。本公開至少解決視頻圖像分割處理過程中分割準確率較低的問題。

技術領域

本公開涉及視頻處理技術領域，具體涉及一種視頻幀處理方法、裝置、電子設備及存儲介質。

背景技術

隨著電子技術的飛速發展，手機和平板電腦等電子設備已普及為人們日常生活中不可缺少的工具，人們可以通過電子設備的攝像頭拍攝視頻，如錄像和視頻通話等。其中，為滿足用戶的需求，電子設備可以通過圖像分割技術，可以將視頻中每幀視頻幀的局部圖像進行分割，如用戶需要進行摳圖或者背景替換等進行圖像分割，等等。

目前，在通過圖像分割技術對視頻獲取第一分割圖像(如視頻通話中的人臉圖像區域等)的過程中，通常是將視頻幀輸入至分割網絡中對視頻幀進行特征提取，然后使用提取的特征對每個像素點預測類別信息，以實現對第一分割圖像的分割。但是，在第一分割圖像在視頻幀中的占比較小的情況下，可能出現像素點的類別信息預測出錯，尤其是對第一分割圖像的邊緣像素點的預測，從而導致分割準確率較低。

發明內容

本公開實施例的目的是提供一種視頻幀處理方法、裝置、電子設備及存儲介質，以解決目前的對視頻進行圖像分割處理過程中存在分割準確率較低的問題。

本公開的技術方案如下：

根據本公開實施例的第一方面，提供一種視頻幀處理方法，方法包括：

獲取視頻的第一視頻幀，其中，所述第一視頻幀包括待分割對象；

獲取所述視頻的第二視頻幀中第一分割圖像的位置信息，其中，所述第二視頻幀為所述第一視頻幀之前的視頻幀，所述第一分割圖像為：針對所述第二視頻幀中所述待分割對象進行圖像分割得到的圖像；

基于所述第一分割圖像的位置信息，確定所述第一視頻幀中的感興趣圖像區域，其中，所述感興趣圖像區域包括所述待分割對象的圖像區域；

將所述感興趣圖像區域的圖像輸入至圖像分割網絡中，得到所述待分割對象在所述第一視頻幀中的第二分割圖像。

在其中一個實施例中，所述基于所述第一分割圖像的位置信息，確定所述第一視頻幀中的感興趣圖像區域，包括：

獲取所述第一視頻幀中位置信息與所述第一分割圖像的位置信息相同的第一圖像區域；

在所述第一視頻幀中對所述第一圖像區域進行區域擴充處理，得到第二圖像區域；

將所述第二圖像區域確定為感興趣圖像區域。

在其中一個實施例中，所述在所述第一視頻幀中對所述第一圖像區域進行區域擴充處理，得到第二圖像區域之前，所述方法還包括：

獲取所述第一分割圖像的第一邊界與所述第二視頻幀的第二邊界的比較結果，其中，所述第一邊界和所述第二邊界為在預設方向上的邊界，所述預設方向為圖像的寬度方向或者高度方向；所述比較結果用于指示所述第一分割圖像的第一邊界與所述第二視頻幀的第二邊界是否重合；

所述在所述第一視頻幀中對所述第一圖像區域進行區域擴充處理，包括：

在所述比較結果指示所述第一邊界與所述第二邊界重合的情況下，在所述預設方向上將所述第一圖像區域的邊界擴充至所述第一視頻幀的邊界；