[發明專利]一種人臉關鍵點追蹤方法及應用和裝置

有效

• 申請號: 201710930086.1
• 申請日: 2017-10-09
• 公開（公告）號: CN107704829B
• 公開（公告）日: 2019-12-03
• 發明（設計）人: 李亮;陳少杰;張文明
• 申請（專利權）人: 武漢斗魚網絡科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 11570 北京眾達德權知識產權代理有限公司
• 代理人: 劉杰<國際申請>=<國際公布>=<進入國

1.一種人臉關鍵點追蹤方法，其特征在于，包括：

采集當前視頻圖像幀；

從所述當前視頻圖像幀中定位出人臉關鍵點；

判斷所述當前視頻圖像幀中的人臉相對于所述當前視頻圖像幀的上一視頻圖像幀中的人臉是否移動；

如果是，將從所述當前視頻圖像幀中定位出的人臉關鍵點確定為所述當前視頻圖像幀的有效人臉關鍵點，否則，將從所述當前視頻圖像幀中定位出的人臉關鍵點與所述上一視頻圖像幀中對應位置的有效人臉關鍵點進行加權和，加權和結果確定為所述當前視頻圖像幀的有效人臉關鍵點，具體包括：獲取所述上一視頻圖像幀中人臉相對于所述當前視頻圖像的再上一視頻圖像幀中人臉是否移動；如果是，基于第一變化因子將從所述當前視頻圖像幀中定位出的人臉關鍵點與所述上一視頻圖像幀中對應位置的有效人臉關鍵點進行加權和。

2.如權利要求1所述的人臉關鍵點追蹤方法，其特征在于，所述判斷所述當前視頻圖像幀中的人臉相對于所述上一視頻圖像幀中的人臉是否移動，包括：

獲取所述當前視頻圖像幀中的每個像素點；

根據所述當前視頻圖像幀中的各個像素點與所述上一視頻圖像幀中對應位置的像素點之間的差值，確定出所述當前視頻圖像幀相對于所述上一視頻圖像幀的第一像素差均值；

判斷所述第一像素差均值是否大于像素差閾值；

如果是，確定所述當前視頻圖像幀中的人臉相對于所述上一視頻圖像幀中的人臉存在移動，否則，確定所述當前視頻圖像幀中的人臉相對于所述上一視頻圖像幀中的人臉不存在移動。

3.如權利要求1所述的人臉關鍵點追蹤方法，其特征在于，所述判斷所述當前視頻圖像幀中的人臉相對于所述上一視頻圖像幀中的人臉是否移動，包括：

根據從所述當前視頻圖像幀中定位出的各個人臉關鍵點與從所述上一視頻圖像幀中定位出的對應位置的人臉關鍵點之間的差值，確定出所述當前視頻圖像幀相對于所述上一視頻圖像幀的第二像素差均值；

判斷所述第二像素差均值是否大于像素差閾值；

如果是，確定所述當前視頻圖像幀中的人臉相對于所述上一視頻圖像幀中的人臉存在移動，否則，確定所述當前視頻圖像幀中的人臉相對于上一視頻圖像幀中的人臉不存在移動。

4.如權利要求1所述的人臉關鍵點追蹤方法，其特征在于，所述將從所述當前視頻圖像幀中定位出的人臉關鍵點與所述上一視頻圖像幀的有效人臉關鍵點進行加權和，還包括：

如果所述上一視頻圖像幀中人臉相對于所述當前視頻圖像的再上一視頻圖像幀中人臉不存在移動，基于第二變化因子將從所述當前視頻圖像幀中定位出的人臉關鍵點與所述上一視頻圖像幀中對應位置的有效人臉關鍵點進行加權和，其中，所述第一變化因子為基于所述第二變化因子確定且大于所述第二變化因子。

5.如權利要求1所述的人臉關鍵點追蹤方法，其特征在于，所述基于第一變化因子將從所述當前視頻圖像幀中定位出的人臉關鍵點與所述上一視頻圖像幀中對應位置的有效人臉關鍵點進行加權和，包括：基于如下加權和公式將從所述當前視頻圖像幀中定位出的人臉關鍵點與所述上一視頻圖像幀中對應位置的有效人臉關鍵點進行加權和：

B.x₂(i)＝B.x₁(i)*β₁+A.x₂(i)*(1.0-β₁)；

B.y₂(i)＝B.y₁(i)*β₁+A.y₂(i)*(1.0-β₁)；

其中，β₁為所述第一變化因子，B.x₁(i)為所述當前視頻圖像幀中定位出的第i人臉關鍵點的x坐標，A.x₂(i)為所述上一視頻圖像幀中第i有效人臉關鍵點的x坐標，B.x₂(i)為所述當前視頻圖像幀的有效人臉關鍵點的x坐標，B.y₁(i)為所述當前視頻圖像幀中定位出的第i人臉關鍵點的y坐標，A.y₂(i)為所述上一視頻圖像幀中第i有效人臉關鍵點的y坐標，B.y₂(i)為所述當前視頻圖像幀的有效人臉關鍵點的y坐標，i為正整數。