[發明專利]人臉跟蹤方法和裝置

有效

• 申請號: 202010326877.5
• 申請日: 2020-04-23
• 公開（公告）號: CN111523467B
• 公開（公告）日: 2023-08-08
• 發明（設計）人: 康洋;洪智濱
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V20/40;G06V10/82;G06N3/0464;G06N3/08
• 代理公司: 北京英賽嘉華知識產權代理有限責任公司 11204
• 代理人: 王達佐;馬曉亞

本申請公開了人臉跟蹤方法和裝置：從當前幀之前的視頻幀序列中，確定當前幀之前進行更新的視頻幀；將當前幀之前進行更新的視頻幀的人臉關鍵點的坐標，確定為當前幀的人臉關鍵點的初始位置；根據當前幀的人臉關鍵點的初始位置，獲取當前幀的人臉關鍵點的坐標。該實施方式解耦了幀間的依賴關系，有效提高了人臉關鍵點跟蹤系統的整體穩定性。

技術領域

本申請涉及圖像處理領域，具體涉及圖像識別技術領域，尤其涉及一種人臉跟蹤方法和裝置。

背景技術

隨著人臉檢測和關鍵點技術的不斷成熟，人臉特效也逐漸進入我們的生活。視頻級別的人臉關鍵點跟蹤需要足夠穩定，當前的技術方案是采用幀間的濾波平滑，即采用的是上一幀的關鍵點位置與當前幀關鍵點位置的加權和作為當前幀的關鍵點位置輸出。

發明內容

本申請實施例提供了一種人臉跟蹤方法、裝置、設備以及存儲介質。

根據第一方面，提供了一種人臉跟蹤方法，該方法包括：從當前幀之前的視頻幀序列中，確定當前幀之前進行更新的視頻幀；將當前幀之前進行更新的視頻幀的人臉關鍵點的坐標，確定為當前幀的人臉關鍵點的初始位置；根據當前幀的人臉關鍵點的初始位置，獲取當前幀的人臉關鍵點的坐標。

在一些實施例中，從當前幀之前的視頻幀序列中，確定當前幀之前進行更新的視頻幀，包括：依次由近及遠計算當前幀之前的視頻幀序列中兩兩相鄰的視頻幀的人臉關鍵點之間的坐標的距離值，直到距離值大于預設距離值，則將得到距離值的兩兩相鄰的視頻幀中時序在后的視頻幀確定為當前幀之前進行更新的視頻幀。

在一些實施例中，從當前幀之前的視頻幀序列中，確定當前幀之前進行更新的視頻幀，包括：響應于獲取當前幀之前的視頻幀序列中兩兩相鄰的視頻幀的人臉關鍵點的坐標失敗，將當前幀的上一幀作為當前幀之前進行更新的視頻幀。

在一些實施例中，根據所述當前幀的人臉關鍵點的初始位置，獲取當前幀的人臉關鍵點的坐標包括：根據當前幀的人臉關鍵點的初始位置，利用卷積神經網絡迭代更新人臉關鍵點的初始位置，得到當前幀的人臉關鍵點的坐標。

在一些實施例中，人臉關鍵點包括五官關鍵點。

根據第二方面，提供了一種人臉跟蹤裝置，該裝置包括：更新模塊，被配置成從當前幀之前的視頻幀序列中，確定當前幀之前進行更新的視頻幀；確定模塊，被配置成將當前幀之前進行更新的視頻幀的人臉關鍵點的坐標，確定為當前幀的人臉關鍵點的初始位置；獲取模塊，被配置成根據當前幀的人臉關鍵點的初始位置，獲取當前幀的人臉關鍵點的坐標。

在一些實施例中，更新模塊進一步被配置成：依次由近及遠計算當前幀之前的視頻幀序列中兩兩相鄰的視頻幀的人臉關鍵點之間的坐標的距離值，直到距離值大于預設距離值，則將得到距離值的兩兩相鄰的視頻幀中時序在后的視頻幀確定為當前幀之前進行更新的視頻幀。

在一些實施例中，更新模塊進一步被配置成：響應于獲取當前幀之前的視頻幀序列中兩兩相鄰的視頻幀的人臉關鍵點的坐標失敗，將當前幀的上一幀作為當前幀之前進行更新的視頻幀。

在一些實施例中，獲取模塊進一步被配置成：根據當前幀的人臉關鍵點的初始位置，利用卷積神經網絡迭代更新人臉關鍵點的初始位置，得到當前幀的人臉關鍵點的坐標。

在一些實施例中，人臉關鍵點包括五官關鍵點。

根據第三方面，提供了一種電子設備，該電子設備包括一個或多個處理器；存儲裝置，其上存儲有一個或多個程序，當一個或多個程序被該一個或多個處理器執行，使得一個或多個處理器實現如第一方面的任一實施例的人臉跟蹤方法。

根據第四方面，提供了一種計算機可讀介質，其上存儲有計算機程序，該程序被處理器執行時實現如第一方面的任一實施例的人臉跟蹤方法。