[發明專利]一種人臉五官識別方法、裝置及系統

有效

• 申請號: 201610237424.9
• 申請日: 2016-04-15
• 公開（公告）號: CN107305622B
• 公開（公告）日: 2021-08-31
• 發明（設計）人: 石建萍
• 申請（專利權）人: 北京市商湯科技開發有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06T7/11;G06T7/136
• 代理公司: 北京三聚陽光知識產權代理有限公司 11250
• 代理人: 馬永芬

本發明提供了一種人臉五官識別方法、裝置及系統，該方法包括：獲取第一人臉圖片；對第一人臉圖片進行分割定位，得到第二人臉圖片；其中，第二人臉圖片包括對第一人臉圖片的第一子區域進行精確分割定位的第三子區域和對第一人臉圖片的第二子區域進行模糊分割定位的第四子區域；對第四子區域分別進行放大，對各個第四子區域進行精確分割定位，得到第五子區域；基于第三子區域和第五子區域生成第三人臉圖片。解決了現有技術中的人臉五官精準定位識別的準確度、精度不高以及需要占用的計算時間較長的問題，從而降低了子網絡所需的復雜度，減少了人臉分割需要的計算時間，提高了人臉五官識別的準確度和精度。

技術領域

本發明涉及圖像處理領域，具體涉及一種人臉五官識別方法、裝置及系統。

背景技術

人臉作為人體的一個重要生物特征，近幾年在圖像處理，視覺技術，信息安全等領域有著越來越重要的作用。而人臉中，五官的判別與定位技術是人臉識別、人臉跟蹤等應用的基礎。現有的人臉五官定位技術主要通過預測一些預先設計的關鍵點，如眼角、眉梢、嘴角等實現。一般常見的人臉關鍵點個數為每張人臉21個關鍵點。而這種基于人臉關鍵點定位的方式由于關鍵點位置少，識別準確度和精度都不高，對于一些需要細節的應用，如美圖，定妝等圖像處理應用，則很難滿足要求。

目前，利用人臉關鍵點定位的方式，為了達到美妝級別的精度，通常的做法是增加預測的關鍵點的數目，如將關鍵點個數增加為68個或106個。但該方法會遇到如下問題：1)增多的人臉關鍵點的標注數據仍不夠多；2)68點或106點仍沒有完全覆蓋五官的邊界，從關鍵點生成的五官區域通常是多邊形，形狀并不準確，依然難以達到美妝等應用的精度需求；3)人臉關鍵點會在邊界上有小范圍移動偏差(如眼睛中間的一點可能在前幀偏左，而后幀偏右)，導致視頻上的結果會有抖動。

如圖1所示，圖1左圖為輸入圖片，中間為基于人臉關鍵點方式得到的眼睛邊界圖片，右圖為基于人臉分割算法得到的眼睛邊界圖片。

現有技術中基于超像素分割的方案，超像素分割本身非常耗時，而之后的基于超像素的條件隨機場的推斷過程也需要花費大量時間，該方法無法將算法做到實用級別。另一類基于全卷積網絡的方法，由于達到較好效果需要的網絡層數較多，及需要精確結果的輸入圖像較大，也很難在保持結果的情況下將算法進行大規模加速。一般來說，基于全卷積網絡的方法在處理人臉分割需要中央處理器(Central Processing Unit，簡稱為CPU)計算時間大約1秒。這樣的速度很難適應實際的應用。

針對相關技術中，人臉五官識別的準確度、精度不高以及需要占用的CPU時間較長的問題，還未提出有效的解決方案。

發明內容

因此，本發明要解決的技術問題在于克服現有技術中的人臉五官識別的準確度、精度不高以及需要占用的計算時間較長的問題，從而提供了一種人臉五官識別方法、裝置及系統。

根據本發明的一個方面，提供了一種人臉五官識別方法，包括：獲取第一人臉圖片；所述第一人臉圖片為完整人臉的圖片，包括至少一個第一子區域和至少一個第二子區域；其中，所述至少一個第一子區域對應第一類型器官，所述至少一個第二子區域對應第二類型器官，每個所述第一子區域的面積占所述第一人臉圖片的總面積的比例均大于或者等于預定閾值，每個所述第二子區域的面積占所述第一人臉圖片的總面積的比例均小于所述預定閾值；對所述第一人臉圖片進行分割定位，得到第二人臉圖片；其中，所述第二人臉圖片包括對所述至少一個第一子區域進行精確分割定位得到的至少一個第三子區域和對所述至少一個第二子區域進行模糊分割定位得到的至少一個第四子區域；對各個所述第四子區域分別進行放大，對放大后的各個所述第四子區域進行精確分割定位，得到至少一個第五子區域；基于所述至少一個第三子區域和所述至少一個第五子區域生成第三人臉圖片。