[發明專利]一種計算機人臉情緒識別系統

有效

• 申請號: 201810139650.2
• 申請日: 2018-02-11
• 公開（公告）號: CN108062546B
• 公開（公告）日: 2020-04-07
• 發明（設計）人: 王寧;陳明明;陳亮;耿亮;曾濤;陳育智;王星杰
• 申請（專利權）人: 廈門華廈學院
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 北京彭麗芳知識產權代理有限公司 11407
• 代理人: 彭麗芳

1.一種計算機人臉情緒識別系統，其特征在于，包括：

人臉圖像采集模塊，用于獲取待識別人的實時人臉圖像；

活體識別模塊，用于完成圖像源是否活體的判斷；若圖像源非活體，則關閉人臉識別系統，并啟動短信自動編輯模塊進行預警短信的發送；若圖像源為活體，則啟動圖像處理模塊進行圖像處理；所述活體識別模塊通過近紅外檢測模塊基于光流法完成圖像源是否活體的判斷；

圖像處理模塊，用于將圖像按五官分割為眼睛區域、眉毛區域、鼻子區域、嘴巴區域和人臉輪廓區域，然后通過kinect深度傳感器分別進行各區域深度圖像的獲取，并將獲取的各區域深度圖像發送到三維人臉重構模塊；

五官位置定位模塊，用于進行待識別人臉圖像中眼睛、眼珠、眉毛、鼻子、嘴巴所在位置的坐標定位，并所得的坐標定位數據發送到三維重構模塊；

圖像特征提取模塊，用于將所獲得的眼睛區域深度圖像、眉毛區域深度圖像、鼻子區域深度圖像、嘴巴區域深度圖像和人臉輪廓區域深度圖像進行三角化，然后在尺度空間中融合所有三角化的深度圖像構建分層有向距離場，對距離場中所有的體素應用整體三角剖分算法產生一個涵蓋所有體素的凸包，并利用Marching Tetrahedra算法構造等值面,獲得的眼睛區域等值面、眉毛區域等值面、鼻子區域等值面、嘴巴區域等值面以及人臉輪廓區域等值面；

三維人臉重構模塊，用于將所獲得的眼睛區域等值面、眉毛區域等值面、鼻子區域等值面、嘴巴區域等值面以及人臉輪廓區域等值面按五官位置的坐標進行定位拼接，從而完成三維人臉的重構；

圖片權重分配模塊，用于采用隨機置換的方式對劃分后的單個區域等值面進行識別，得到區域對應的識別率，然后將所有區域訓練完成后按照各區域識別率比例分配權重；

人臉識別模塊，用于獲取三維人臉中各區域所在的三維坐標，并將各等值面用其對應的三維坐標進行標記后串聯形成增強特征向量，利用卡方距離度量等值面相似度，然后采用最近鄰分類器進行人臉識別。

2.根據權利要求1所述的一種計算機人臉情緒識別系統，其特征在于，所述人臉識別模塊用于將各區域的等值面用其在三維重構模塊中的三維坐標進行標記后，按照從左到右，從上到下的順序線性串聯各區域的等值面。

3.根據權利要求1所述的一種計算機人臉情緒識別系統，其特征在于，所述人臉識別模塊用于將完成權重分配的各等值面按順序串聯形成增強特征向量，利用卡方距離度量等值面相似度，然后采用最近鄰分類器進行人臉識別。

4.根據權利要求1所述的一種計算機人臉情緒識別系統，其特征在于，還包括一人機操作模塊，用于輸入各種控制命令和數據調用命令。

5.根據權利要求1所述的一種計算機人臉情緒識別系統，其特征在于，所述人臉圖像采集模塊包括：

圖像采集單元，用于進行待識別人臉圖像的采集；

人臉檢測單元，用于捕捉出現在圖像當中的人臉圖片，并截取適當大小的人臉圖片作為圖形處理模塊的輸入。