[發(fā)明專利]一種人臉追蹤的方法及裝置

有效

• 申請?zhí)枺?/td>: 201611248067.2
• 申請日: 2016-12-29
• 公開（公告）號: CN106650682B
• 公開（公告）日: 2020-05-01
• 發(fā)明（設計）人: 張鉑翼
• 申請（專利權）人: TCL集團股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 深圳中一專利商標事務所 44237
• 代理人: 張娜

1.一種人臉追蹤的方法，其特征在于，包括：

獲取人臉檢測框在上一圖像幀中的圖像位置；

在當前圖像幀中，定位出相同所述圖像位置的區(qū)域；

若未檢測到人臉圖像，則將下一圖像幀作為所述當前圖像幀處理；

將所述當前圖像幀中定位出的區(qū)域內的圖像與所述人臉檢測框中人臉的正面模板進行人臉對齊，獲取所述當前圖像中所述人臉的特征點位置，所述將所述當前圖像幀中定位出的區(qū)域內的圖像與所述人臉檢測框中人臉的正面模板進行人臉對齊，獲取所述當前圖像中所述人臉的特征點位置，包括：對所述當前圖像幀中定位出的區(qū)域內的圖像進行仿射變換，以使該區(qū)域內的人臉圖像變換為正面的人臉圖像，將所述正面的人臉圖像與所述人臉檢測框中人臉的正面模板進行人臉對齊，獲取所述正面的人臉圖像中人臉的特征點位置，對所述正面的人臉圖像進行仿射變換，變換為所述當前圖像幀中定位出的區(qū)域內的圖像，獲取所述當前圖像幀中所述人臉的特征點位置，所述對所述當前圖像幀中定位出的區(qū)域內的圖像進行仿射變換，以使該區(qū)域內的人臉圖像變換為正面的人臉圖像，包括：根據(jù)所述當前圖像幀中定位出的區(qū)域內的特征點的坐標和人臉的正面模板中的對應特征點的坐標計算所述當前圖像幀和所述人臉的正面模板之間的仿射變換矩陣，通過仿射變換矩陣將所述當前圖像幀中定位出的區(qū)域內的圖像變換為正面的人臉圖像，所述當前圖像幀中定位出的區(qū)域內的特征點包括：所述當前圖像幀中定位出的區(qū)域內的眼睛的兩個眼角和嘴唇的兩個唇角；

根據(jù)獲取到的所述特征點位置，在所述當前圖像幀中確定出人臉檢測框。

2.如權利要求1所述的方法，其特征在于，在當前圖像幀中，定位出相同所述圖像位置的區(qū)域之后，所述將所述當前圖像幀中定位出的區(qū)域內的圖像與所述人臉檢測框中人臉的正面模板進行人臉對齊之前，所述方法還包括：

在所述當前圖像幀中定位出的區(qū)域內，檢測是否有人臉圖像；

若未檢測到人臉圖像，對所述當前圖像幀進行全局的人臉檢測，以重新對所述區(qū)域進行定位。

3.如權利要求1所述的方法，其特征在于，所述方法還包括：

若在連續(xù)預設幀數(shù)的圖像幀中都未檢測到人臉，則對所述當前幀圖像進行全局的人臉檢測，以重新對所述區(qū)域進行定位。

4.一種人臉追蹤的裝置，其特征在于，包括：

獲取單元，用于獲取人臉檢測框在上一圖像幀中的圖像位置；

定位單元，用于在當前圖像幀中，定位出相同所述圖像位置的區(qū)域；

第二檢測單元，用于：在所述當前圖像幀中定位出的區(qū)域內，檢測是否有人臉圖像，若未檢測到人臉圖像，則將下一圖像幀作為所述當前圖像幀處理；

對齊單元，用于將所述當前圖像幀中定位出的區(qū)域內的圖像與所述人臉檢測框中人臉的正面模板進行人臉對齊，獲取所述當前圖像中所述人臉的特征點位置，所述對齊單元在執(zhí)行所述將所述當前圖像幀中定位出的區(qū)域內的圖像與所述人臉檢測框中人臉的正面模板進行人臉對齊，獲取所述當前圖像中所述人臉的特征點位置時，具體用于：對所述當前圖像幀中定位出的區(qū)域內的圖像進行仿射變換，以使該區(qū)域內的人臉圖像變換為正面的人臉圖像，將所述正面的人臉圖像與所述人臉檢測框中人臉的正面模板進行人臉對齊，獲取所述正面的人臉圖像中人臉的特征點位置，對所述正面的人臉圖像進行仿射變換，變換為所述當前圖像幀中定位出的區(qū)域內的圖像，獲取所述當前圖像幀中所述人臉的特征點位置，所述對齊單元在執(zhí)行所述對所述當前圖像幀中定位出的區(qū)域內的圖像進行仿射變換，以使該區(qū)域內的人臉圖像變換為正面的人臉圖像時，具體用于：根據(jù)所述當前圖像幀中定位出的區(qū)域內的特征點的坐標和人臉的正面模板中的對應特征點的坐標計算所述當前圖像幀和所述人臉的正面模板之間的仿射變換矩陣，通過仿射變換矩陣將所述當前圖像幀中定位出的區(qū)域內的圖像變換為正面的人臉圖像，所述當前圖像幀中定位出的區(qū)域內的特征點包括：所述當前圖像幀中定位出的區(qū)域內的眼睛的兩個眼角和嘴唇的兩個唇角；

計算單元，用于根據(jù)獲取到的所述特征點位置，在所述當前圖像幀中確定出人臉檢測框。