[發明專利]基于自適應閾值分割的視頻數據實時處理方法及裝置

有效

• 申請號: 201711376465.7
• 申請日: 2017-12-19
• 公開（公告）號: CN108109161B
• 公開（公告）日: 2021-05-11
• 發明（設計）人: 趙鑫;邱學侃;顏水成
• 申請（專利權）人: 北京奇虎科技有限公司
• 主分類號: G06T7/194
• 分類號: G06T7/194;G06T7/136;G06T7/143;G06T5/50;G06K9/46;G06K9/00
• 代理公司: 深圳市世紀恒程知識產權代理事務所 44287
• 代理人: 胡海國

本發明公開了一種基于自適應閾值分割的視頻數據實時處理方法、裝置、計算設備及計算機存儲介質，該方法包括：實時獲取視頻中包含特定對象的當前幀圖像；對當前幀圖像進行場景分割處理，得到針對特定對象的前景概率信息，根據前景概率信息，確定前景區域占比，并依據前景區域占比，對前景概率信息進行映射處理，得到與當前幀圖像對應的圖像分割結果；根據圖像分割結果，確定處理后的前景圖像；依據處理后的前景圖像，添加個性化特效，得到幀處理圖像；將幀處理圖像覆蓋當前幀圖像得到處理后的視頻數據；顯示處理后的視頻數據。該技術方案提高了圖像場景分割的分割精度以及處理效率，基于圖像分割結果能夠更為精準、快速地對幀圖像添加個性化特效。

技術領域

本發明涉及圖像處理技術領域，具體涉及一種基于自適應閾值分割的視頻數據實時處理方法、裝置、計算設備及計算機存儲介質。

背景技術

現有技術中，當用戶需要對視頻進行更換背景、添加特效等個性化處理時，經常會使用到圖像分割方法對視頻中的幀圖像進行場景分割處理，其中，采用基于深度學習的圖像分割方法可以達到像素級別的分割效果。然而現有的圖像分割方法在進行場景分割處理時，并不考慮前景圖像在幀圖像中所占比例，因此當前景圖像在幀圖像中所占比例較小時，利用現有的圖像分割方法很容易將實際屬于前景圖像邊緣處的像素點劃分為背景圖像，所得到的圖像分割結果的分割精度較低、分割效果較差。因此，現有技術中的圖像分割方式存在著圖像場景分割的分割精度低下的問題，那么利用所得到的圖像分割結果也無法很好地、精準地對視頻中的幀圖像添加個性化特效，所得到的處理后的視頻數據的顯示效果較差。

發明內容

鑒于上述問題，提出了本發明以便提供一種克服上述問題或者至少部分地解決上述問題的基于自適應閾值分割的視頻數據實時處理方法、裝置、計算設備及計算機存儲介質。

根據本發明的一個方面，提供了一種基于自適應閾值分割的視頻數據實時處理方法，該方法包括：

實時獲取圖像采集設備所拍攝和/或所錄制的視頻中包含特定對象的當前幀圖像；

對當前幀圖像進行場景分割處理，得到針對特定對象的前景概率信息，根據前景概率信息，確定前景區域占比，并依據前景區域占比，對前景概率信息進行映射處理，得到與當前幀圖像對應的圖像分割結果；

根據圖像分割結果，確定處理后的前景圖像；

依據處理后的前景圖像，添加個性化特效，得到幀處理圖像；

將幀處理圖像覆蓋當前幀圖像得到處理后的視頻數據；

顯示處理后的視頻數據。

進一步地，前景概率信息記錄了用于反映當前幀圖像中各個像素點屬于前景圖像的概率。

進一步地，依據處理后的前景圖像，添加個性化特效，得到幀處理圖像進一步包括：

從處理后的前景圖像中提取出待處理區域的關鍵信息；

根據關鍵信息，繪制效果貼圖；

將效果貼圖、處理后的前景圖像與預設背景圖像進行融合處理，得到幀處理圖像；或者，將效果貼圖、處理后的前景圖像與根據圖像分割結果確定的處理后的背景圖像進行融合處理，得到幀處理圖像。

進一步地，關鍵信息為關鍵點信息；根據關鍵信息，繪制效果貼圖進一步包括：

查找與關鍵點信息對應的基礎效果貼圖；或者，獲取用戶指定的基礎效果貼圖；

根據關鍵點信息，計算具有對稱關系的至少兩個關鍵點之間的位置信息；

依據位置信息，對基礎效果貼圖進行處理，得到效果貼圖。

進一步地，依據處理后的前景圖像，添加個性化特效，得到幀處理圖像進一步包括：