[發明專利]一種人臉圖像的防抖方法、裝置、設備及可讀存儲介質

在審

• 申請號: 202210129140.3
• 申請日: 2022-02-11
• 公開（公告）號: CN114511725A
• 公開（公告）日: 2022-05-17
• 發明（設計）人: 蘆愛余
• 申請（專利權）人: 廣州虎牙科技有限公司
• 主分類號: G06V10/762
• 分類號: G06V10/762;G06K9/62;G06V40/16
• 代理公司: 北京博思佳知識產權代理有限公司 11415
• 代理人: 王茹

本申請提供一種人臉圖像的防抖方法、裝置、設備及可讀存儲介質。該方法包括：獲取當前圖像幀中的若干人臉特征點；基于所述當前圖像幀以及所述當前圖像幀的至少兩個相鄰圖像幀，確定所述人臉特征點的位移向量；確定與所述人臉特征點所對應的聚類空間，根據所述位移向量對所述聚類空間中的人臉特征點進行聚類所述聚類空間包含所述人臉特征點以及所述人臉特征點周圍指定區域的人臉特征點；根據所述聚類結果對所述人臉特征點進行防抖處理。

技術領域

本申請涉及圖像處理技術領域，尤其是一種人臉圖像的防抖方法、裝置、設備及可讀存儲介質。

背景技術

隨著技術的發展，深度學習技術以大數據模型訓練獲得的模型應用在生活/工業的方方面面。而人臉應用場景以人臉本身具備結構化穩定的特性，應用的非常成功。

不論是深度學習算法還是傳統的人臉特征點算法，輸出結果中的像素點難免會存在抖動。抖動的原因通常是隨機噪聲、圖像背景或拍攝多張圖像時光線變化等外界干擾因素對結果的影響。在傳統的人臉防抖技術中，通常通過不同的濾波算法進行濾波處理，例如卡爾曼濾波，中值濾波，高斯濾波等算法，但這些濾波算法通常不關注輸出結果原本是在人臉特征點的正常移動還是抖動，均將輸出結果當作抖動進行濾波處理，處理時如果去除抖動的算法權重較大就會造成處理時長較長，造成圖像延遲，權重較小則會帶來不可避免的抖動。理論上，人臉靜止時，多張圖像經過濾波算法處理后輸出的特征點是應該在視覺效果上沒有明顯抖動的，而人臉移動時，需要在保持防抖效果的同時，不能有太大的延遲，但目前通用的濾波算法無法實現。

發明內容

有鑒于此，本申請提供一種人臉圖像的防抖方法、裝置、設備及可讀介質。

具體地，本申請是通過如下技術方案實現的：

第一方面，本申請實施例提供一種人臉圖像的防抖方法，所述方法包括：

獲取當前圖像幀中的若干人臉特征點；

基于所述當前圖像幀以及所述當前圖像幀的至少兩個相鄰圖像幀，確定所述人臉特征點的位移向量；

確定與所述人臉特征點所對應的聚類空間，所述聚類空間包含所述人臉特征點以及所述人臉特征點周圍指定區域的人臉特征點；

根據所述位移向量對所述聚類空間中的人臉特征點進行聚類；

根據所述聚類結果對所述人臉特征點進行防抖處理。

第二方面，本申請實施例提供一種人臉圖像的防抖裝置，所述裝置包括：

圖像檢測模塊，用于獲取當前圖像幀中的若干人臉特征點；

處理模塊，用于確定所述獲取到的若干人臉特征點在當前圖像幀以及所述當前圖像幀至少兩個相鄰幀的位移向量；

聚類模塊，用于確定與所述人臉特征點所對應的聚類空間，以及根據所述位移向量對所述聚類空間中的人臉特征點進行聚類；所述聚類空間包含所述人臉特征點以及所述人臉特征點周圍指定區域的人臉特征點；

防抖處理模塊，用于根據所述聚類結果對所述人臉特征點進行防抖處理。

第三方面，本申請實施例提供一種人臉圖像的防抖設備，所述設備包括：

處理器；

用于存儲處理器可執行指令的存儲器；

其中，所述處理器被配置為執行如前述第一方面所述的任意一項方法所述的操作。

第四方面，本申請提供一種計算機可讀存儲介質，其上存儲有計算機指令，該指令被處理器執行時實現如前述第一方面所述的任意一項方法所述的操作。