[發明專利]雙目攝像頭人臉圖像異常監測的方法及系統

在審

• 申請號: 202111431702.1
• 申請日: 2021-11-29
• 公開（公告）號: CN114093007A
• 公開（公告）日: 2022-02-25
• 發明（設計）人: 李旭濱;胡炳然;陳吉勝
• 申請（專利權）人: 云知聲（上海）智能科技有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16
• 代理公司: 上海唯源專利代理有限公司 31229
• 代理人: 宋小光

1.一種雙目攝像頭人臉圖像異常監測的方法，其特征在于，包括如下步驟：

利用雙目攝像頭獲取人臉圖像RGB數據；

基于所獲取的人臉圖像RGB數據獲得左眼坐標信息、右眼坐標信息以及鼻子坐標信息；

利用如下公式計算人臉瞳距信息：

Dist1＝sqrt((e_x1-e_x2)^2+(e_y1-e_y2)^2)，

Dist2＝2*Dist1/(1+α)，

α＝exp(-s*|n_x-(e_x1+e_x2)/2|/(e_x2-e_x1)),

其中，Dist1表示左眼中心與右眼中心之間的像素值，Dist2表示人臉瞳距信息，e_x1和e_y1表示左眼坐標信息，e_x2和e_y2表示右眼坐標信息，α表示瞳距修正因子，s0，表示修正系數，n_x表示鼻子坐標信息中的x軸的坐標值；

對計算得到的人臉瞳距信息與預設瞳距范圍進行比較判斷，若所述人臉瞳距信息超出預設瞳距范圍則判斷結果為不合格，若所述人臉瞳距信息在預設瞳距范圍內則判斷結果為合格。

2.如權利要求1所述的雙目攝像頭人臉圖像異常監測的方法，其特征在于，還包括：

基于所獲取的人臉圖像RGB數據獲得左嘴角坐標信息和右嘴角坐標信息；

利用如下公式計算人臉角度：

score_x＝abs(n_x-e_x1)/(e_x2-e_x1)；

score_y＝abs(n_y-e_y)/(m_y-e_y)；

e_y＝(e_y1+e_y2)/2；

m_y＝(m_y1+m_y2)/2；

其中，score_x表示人臉在水平方向上的旋轉偏移度，score_y表示人臉在垂直方向上的旋轉偏移度，n_x和n_y表示鼻子坐標信息，e_y表示左右眼睛縱坐標的中心，m_y表示左右嘴角縱坐標的中心，m_y1表示左嘴角坐標信息中的y軸的坐標值，m_y2表示右嘴角坐標信息中的y軸的坐標值；

對計算得到的人臉角度score_x和score_y與預設角度范圍進行比較判斷，若超出預設角度范圍則判斷結果為不合格，若在預設角度范圍內則判斷結果為合格。

3.如權利要求1所述的雙目攝像頭人臉圖像異常監測的方法，其特征在于，在利用雙目攝像頭獲取人臉圖像RGB數據的同時，獲取人臉圖像紅外數據；

將所述人臉圖像RGB數據和所述人臉圖像紅外數據送入孿生網絡模型中，得到相似度分數；

對所得到的相似度分數與預設分數值進行比較判斷，若大于等于預設分數值則判斷結果為合格，否則為不合格。

4.如權利要求1所述的雙目攝像頭人臉圖像異常監測的方法，其特征在于，在判斷結果為不合格時，返回交互提示信息。

5.如權利要求1所述的雙目攝像頭人臉圖像異常監測的方法，其特征在于，所述預設瞳距范圍根據所述雙目攝像頭的分辨率設定。

6.一種雙目攝像頭人臉圖像異常監測的系統，其特征在于，包括：

圖像采集單元，與雙目攝像頭連接，用于利用雙目攝像頭獲取人臉圖像RGB數據；

關鍵點檢測單元，與所述圖像采集單元連接，用于從所述人臉圖像RGB圖像中獲取左眼坐標信息、右眼坐標信息以及鼻子坐標信息；

人臉瞳距計算單元，與所述關鍵點檢測單元連接，用于利用如下公式計算人臉瞳距信息：

Dist1＝sqrt((e_x1-e_x2)^2+(e_y1-e_y2)^2)，

Dist2＝2*Dist1/(1+α)，

α＝exp(-s*|n_x-(e_x1+e_x2)/2|/(e_x2-e_x1)),

其中，Dist1表示左眼中心與右眼中心之間的像素值，Dist2表示人臉瞳距信息，e_x1和e_y1表示左眼坐標信息，e_x2和e_y2表示右眼坐標信息，α表示瞳距修正因子，s0，表示修正系數，n_x表示鼻子坐標信息中的x軸的坐標值；

處理單元，與所述圖像采集單元、所述關鍵點檢測單元以及所述人臉瞳距計算單元連接，用于對計算得到的人臉瞳距信息與預設瞳距范圍進行比較判斷，若所述人臉瞳距信息超出預設瞳距范圍則判斷結果為不合格，若所述人臉瞳距信息在預設瞳距范圍內則判斷結果為合格。