[發明專利]一種基于人臉識別技術的眼鏡虛擬試戴方法

在審

• 申請號: 201910289996.5
• 申請日: 2019-04-11
• 公開（公告）號: CN111815382A
• 公開（公告）日: 2020-10-23
• 發明（設計）人: 惠開進;辛羊華;薛敏
• 申請（專利權）人: 蘇州工其器智能科技有限公司
• 主分類號: G06Q30/06
• 分類號: G06Q30/06;G06T19/00;G06K9/00
• 代理公司: 昆明合眾智信知識產權事務所 53113
• 代理人: 張璽

1.一種基于人臉識別技術的眼鏡虛擬試戴方法，其特征在于，包括以下步驟：

步驟一，Unity端啟動后，Unity端開啟每幀循環視頻刷新，Android端調取攝像頭獲取視頻數據，JNI端對獲取的圖像做美化處理，獲取到圖像后傳到面板顯示；

步驟二，Unity端啟動后，Unity端開啟每幀循環人臉檢測，Android端獲取圖片數據，JNI端進行人臉關鍵點檢測、人臉與識別點位對齊以及人臉姿態估算，得到人臉識別數據，經矩陣變換和三維空間轉換，數據轉換成Unity的掛載點位，通過Unity3D引擎中的相機將顯示模型渲染到對應點位；

步驟三，視頻與模型通過層級設置合并渲染顯示。

2.根據權利要求1所述的基于人臉識別技術的眼鏡虛擬試戴方法，其特征在于，所述步驟二的人臉關鍵點檢測使用Wing Loss函數。

3.根據權利要求1所述的基于人臉識別技術的眼鏡虛擬試戴方法，其特征在于，所述步驟二的人臉與識別點位對齊包括數個二維坐標點坐標、每個二維坐標點對應的三維坐標和相機的內參數矩陣，其中進行相機參數估計時首先使用張正友的棋盤格對相機進行標定，相機的內參數矩陣需設定相機的焦距、圖像的中心位置并且假設不存在徑向畸變。

4.根據權利要求1所述的基于人臉識別技術的眼鏡虛擬試戴方法，其特征在于，所述步驟二的人臉姿態估算過程中有三個坐標系，分別為世界坐標系、相機坐標系和圖像坐標系。