[發明專利]一種基于人臉識別技術的面部對稱性評估方法

在審

• 申請號: 201910810551.7
• 申請日: 2019-08-29
• 公開（公告）號: CN110516626A
• 公開（公告）日: 2019-11-29
• 發明（設計）人: 戴文斌;張智捷
• 申請（專利權）人: 上海交通大學
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 31220 上海旭誠知識產權代理有限公司
• 代理人: 鄭立<國際申請>=<國際公布>=<進入國

1.一種基于人臉識別技術的面部對稱性評估方法，其特征在于，包括以下步驟：

步驟S1、針對面癱患者的面部特征建立特征點識別模型：

通過在線云服務平臺向合作醫院及醫生采集面癱患者的頭部正臉照片樣本，并人工標記人臉關鍵點和角膜識別圓；

使用機器學習的方法對人臉各部位進行分部位訓練；

使用深度學習的方法對角膜識別圓進行訓練；

步驟S2、用戶使用已訓練好的特征點識別模型檢測目標照片的人臉關鍵點和角膜識別圓，并將檢測結果繪制在目標圖片上；

步驟S3、用戶可根據自身的精確度要求對檢測出的人臉關鍵點和角膜識別圓進行人工拖動調整，以滿足更高的精確度要求；

步驟S4、根據角膜識別圓的檢測結果建立人臉坐標系，對原目標圖片通過坐標系平移和旋轉變換，構成臉部特有的坐標系，并計算所有人臉關鍵點在人臉坐標系下的坐標值；

步驟S5、根據所有人臉關鍵點的新坐標值，經計算獲得臉部各部位的量化對稱性結果，并建立臉部對稱性評估體系，得出目標照片的對稱性評估結果。

2.如權利要求1所述的基于人臉識別技術的面部對稱性評估方法，其特征在于，在步驟S1中，所述人臉關鍵點的范圍包括：標出需要識別的所有人臉關鍵點，畫出人臉位置矩形框；所述角膜識別圓的范圍包括：標出左右角膜的大小和圓心位置。

3.如權利要求1所述的基于人臉識別技術的面部對稱性評估方法，其特征在于，在步驟S1中，所述分部位訓練包括：分別對眼、眉、鼻、嘴等部位進行訓練建模；對于角膜部分，將左右角膜拆分開分別作為樣本進行訓練。

4.如權利要求1所述的基于人臉識別技術的面部對稱性評估方法，其特征在于，在步驟S2中，當角膜被眼皮遮擋導致不完整時，所述角膜識別圓由所述特征點識別模型進行完整的識別提取。

5.如權利要求1所述的基于人臉識別技術的面部對稱性評估方法，其特征在于，在步驟S3中，被檢測的目標照片中經過人工拖動調整的人臉關鍵點和角膜識別圓在網絡可用時上傳至所述在線云服務平臺，以供特征點識別模型的優化。

6.如權利要求1所述的基于人臉識別技術的面部對稱性評估方法，其特征在于，在步驟S4中，所述角膜識別圓的直徑作為參照長度并定義為10mm；所述新的坐標系中，左右角膜識別圓的圓心連線為X軸，連線中點為原點(0,0)，連線中垂線為Y軸。

7.如權利要求1所述的基于人臉識別技術的面部對稱性評估方法，其特征在于，在步驟S5中，所述臉部對稱性評估體系包括靜態、動態和聯動三大分組的評分體系，并將每組細分為臉部各部位的分數評估，最終將分組得到的分數進行加權總和，得到最終的對稱性評估結果。

8.如權利要求1所述的基于人臉識別技術的面部對稱性評估方法，其特征在于，所述特征點識別模型的訓練過程和檢測目標照片過程中使用相同的算法進行操作。

9.如權利要求1所述的基于人臉識別技術的面部對稱性評估方法，其特征在于，還包括一套配套開發的圖形界面客戶端，用于顯示所述人臉關鍵點和角膜識別圓的檢測結果圖像，用戶和通過圖形界面客戶端對檢測出的任意人臉關鍵點的位置和和角膜識別圓的范圍進行修正。

10.如權利要求1所述的基于人臉識別技術的面部對稱性評估方法，其特征在于，在步驟S1中，所述人臉關鍵點和角膜識別圓的人工標記過程的同時，醫生對面癱患者的照片樣本其各部位的對稱性進行打分，該打分與步驟S5中所述臉部對稱性評估體系進行結合訓練，以達到自動給出對稱性結果評估的目的。