[發明專利]人臉檢測及關鍵點定位方法、裝置、系統和存儲介質

有效

• 申請號: 201710943217.X
• 申請日: 2017-10-11
• 公開（公告）號: CN108875492B
• 公開（公告）日: 2020-12-22
• 發明（設計）人: 俞剛;袁野
• 申請（專利權）人: 北京曠視科技有限公司;北京邁格威科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 北京市磐華律師事務所 11336
• 代理人: 高偉;卜璐璐

1.一種人臉檢測及關鍵點定位方法，其特征在于，所述方法包括：

導入待檢測圖像；

對所述待檢測圖像進行人臉檢測和多次人臉關鍵點定位，每次人臉關鍵點定位的結果用于更新人臉檢測結果，且更新后的帶有人臉關鍵點定位的人臉檢測結果作為下一次人臉關鍵點定位的基礎；以及

將基于最后一次人臉關鍵點定位結果更新后的帶有人臉關鍵點定位的人臉檢測結果輸出以作為最終的人臉檢測及關鍵點定位結果；

所述的方法進一步包括：

對所述待檢測圖像進行人臉框定位，并輸出第一人臉框定位結果；

對所述第一人臉框定位結果中的第一人臉框進行人臉粗略內部關鍵點定位，并基于所述人臉粗略內部關鍵點定位的結果過濾所述第一人臉框以產生帶有人臉內部關鍵點定位的第二人臉框定位結果；

對所述第二人臉框定位結果中的第二人臉框進行人臉粗略關鍵點定位，并基于所述人臉粗略關鍵點定位的結果過濾所述第二人臉框以產生帶有人臉粗略關鍵點定位的第三人臉框定位結果；以及

對所述第三人臉框定位結果中的第三人臉框進行人臉精細關鍵點定位，并基于所述人臉精細關鍵點定位的結果過濾所述第三人臉框以產生帶有人臉精細關鍵點定位的第四人臉框定位結果，以作為所述待檢測圖像的最終人臉檢測及關鍵點定位結果。

2.根據權利要求1所述的方法，其特征在于，所述多次人臉關鍵點定位中的每次人臉關鍵點定位分別采用具有不同定位精度的神經網絡，且從前到后的神經網絡的定位精度遞增。

3.根據權利要求1所述的方法，其特征在于，所述每次人臉關鍵點定位的結果用于更新人臉檢測結果包括：

所述每次人臉關鍵點定位的結果均對前次的人臉檢測結果產生新的置信度值，所述更新人臉檢測結果包括過濾掉新的置信度值低于預定閾值的人臉框。

4.根據權利要求1所述的方法，其特征在于，所述人臉框定位、所述人臉粗略內部關鍵點定位、所述人臉粗略關鍵點定位以及所述人臉精細關鍵點定位是基于多個級聯的神經網絡分別執行的。

5.根據權利要求4所述的方法，其特征在于，所述多個級聯的神經網絡是經過端到端的聯合訓練而成。

6.根據權利要求4所述的方法，其特征在于，用于執行所述人臉框定位的神經網絡為輕量級神經網絡。

7.一種用于實現權利要求1-6中的任一項所述的人臉檢測及關鍵點定位方法的人臉檢測及關鍵點定位裝置，其特征在于，所述裝置包括：

導入模塊，用于導入待檢測圖像；

檢測模塊，用于對所述待檢測圖像進行人臉檢測和多次人臉關鍵點定位，每次人臉關鍵點定位的結果用于更新人臉檢測結果，且更新后的帶有人臉關鍵點定位的人臉檢測結果作為下一次人臉關鍵點定位的基礎；以及

輸出模塊，用于將基于最后一次人臉關鍵點定位結果更新后的帶有人臉關鍵點定位的人臉檢測結果輸出以作為最終的人臉檢測及關鍵點定位結果。

8.一種人臉檢測及關鍵點定位系統，其特征在于，所述人臉檢測及關鍵點定位系統包括存儲裝置和處理器，所述存儲裝置上存儲有由所述處理器運行的計算機程序，所述計算機程序在被所述處理器運行時執行如權利要求1-6中的任一項所述的人臉檢測及關鍵點定位方法。

9.一種存儲介質，其特征在于，所述存儲介質上存儲有計算機程序，所述計算機程序在運行時執行如權利要求1-6中的任一項所述的人臉檢測及關鍵點定位方法。