[發明專利]面部跟蹤方法、設備及存儲介質

在審

• 申請號: 202210615910.5
• 申請日: 2022-05-31
• 公開（公告）號: CN114898441A
• 公開（公告）日: 2022-08-12
• 發明（設計）人: 張昱航
• 申請（專利權）人: 阿里巴巴（中國）有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V10/22;G06T7/73;G06T7/62;G06T7/20;G06T5/20
• 代理公司: 北京同鈞律師事務所 16037
• 代理人: 吳梅錫;許懷遠

本申請提供一種面部跟蹤方法、設備及存儲介質，該方法包括：接收多張圖像幀，多張圖像幀包括目標人物面部，通過獲取目標人物面部在相鄰的兩個圖像幀的位姿數據，獲取目標人物面部在相鄰的兩個圖像幀的位姿數據變化，再根據目標人物面部在相鄰的兩個圖像幀的位姿數據變化，調整相鄰兩個圖像幀的后一圖像幀中目標人物臉部的關鍵點位置，提升面部關鍵點的檢測跟蹤效果。

技術領域

本申請涉及計算機視覺領域，尤其涉及一種面部跟蹤方法、設備及存儲介質。

背景技術

面部檢測跟蹤是指在視頻流或圖像幀序列中檢測到人物面部關鍵點后，在后續圖像幀中繼續捕獲人物面部關鍵點的位置，廣泛應用于電視電話會議、直播連麥、短視頻錄制、機場安防等領域。目前，現有的面部檢測跟蹤方案計算資源消耗過高，對設備的要求較高，檢測跟蹤效果欠佳。

發明內容

本申請實施例提供一種面部跟蹤方法、設備及存儲介質，提升面部關鍵點的檢測跟蹤效果。

本申請實施例的第一方面提供一種面部跟蹤方法，包括：

接收多張圖像幀，所述多張圖像幀包括目標人物面部；

獲取所述目標人物面部在第一圖像幀相對于第二圖像幀的位姿數據變化；所述第一圖像幀為所述多張圖像幀中除第一幀外的任一圖像幀，所述第二圖像幀為所述第一圖像幀的上一圖像幀；

根據所述位姿數據變化，調整所述第一圖像幀中所述目標人物面部的關鍵點位置。

本申請第一方面的一個可選實施例中，所述目標人物面部的所述位姿數據變化包括三維姿態數據變化；所述獲取目標人物面部在第一圖像幀相對于第二圖像幀的位姿數據變化，包括：

獲取所述目標人物面部在所述第一圖像幀以及所述第二圖像幀的三維姿態數據；

根據所述目標人物面部在所述第一圖像幀以及所述第二圖像幀的三維姿態數據，確定所述三維姿態數據變化。

本申請第一方面的一個可選實施例中，所述獲取所述目標人物面部在所述第一圖像幀以及所述第二圖像幀的三維姿態數據，包括：

獲取所述目標人物面部在所述第一圖像幀的第一關鍵點檢測數據，根據所述第一關鍵點檢測數據確定所述目標人物面部在所述第一圖像幀的三維姿態數據；

獲取所述目標人物面部在所述第二圖像幀的第二關鍵點檢測數據，根據所述第二關鍵點檢測數據確定所述目標人物面部在所述第二圖像幀的三維位姿數據。

本申請第一方面的一個可選實施例中，所述方法還包括：

獲取所述目標人物面部在所述第一圖像幀的面積占比；

根據所述目標人物面部在所述第一圖像幀的面積占比，確定第一參數；

所述第一參數用于調整所述位姿數據變化，所述第一參數與所述目標人物面部在所述第一圖像幀的面積占比負相關。

本申請第一方面的一個可選實施例中，所述獲取目標人物面部在第一圖像幀相對于第二圖像幀的位姿數據變化，包括：

通過所述第一參數調整所述目標人物面部在第一圖像幀相對于第二圖像幀的位姿數據變化，獲取調整后的位姿數據變化；

所述根據所述位姿數據變化，調整所述第一圖像幀中所述目標人物面部的關鍵點位置，包括：根據調整后的位姿數據變化，調整所述第一圖像幀中所述目標人物面部的關鍵點位置。

本申請第一方面的一個可選實施例中，所述根據所述位姿數據變化，調整所述第一圖像幀中所述目標人物面部的關鍵點位置，包括：

若所述目標人物面部在至少兩個維度的姿態數據變化小于閾值，通過第一濾波器調整所述第一圖像幀中所述目標人物面部的關鍵點位置；或者