[發(fā)明專利]基于人臉識別、關(guān)鍵點檢測的疲勞度檢測裝置及其檢測方法

在審

• 申請?zhí)枺?/td>: 202011369802.1
• 申請日: 2020-11-30
• 公開（公告）號: CN112668393A
• 公開（公告）日: 2021-04-16
• 發(fā)明（設(shè)計）人: 胡宇濤;吳天賜;夏琨;趙音龍;陳豐生
• 申請（專利權(quán)）人: 海納致遠(yuǎn)數(shù)字科技（上海）有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/20
• 代理公司: 上海申浩律師事務(wù)所 31280
• 代理人: 龔敏

1.基于人臉識別、關(guān)鍵點檢測的疲勞度檢測裝置，其特征在于：包括人臉信號處理模塊、人臉狀態(tài)采集模塊、感光模塊、GPS模塊、語音報警模塊和電源管理模塊，所述人臉信號處理模塊分別與人臉狀態(tài)采集模塊、感光模塊、GPS模塊、語音模塊有線連接通信，同時由電源管理模塊供電。

2.根據(jù)權(quán)利要求1所述的基于人臉識別、關(guān)鍵點檢測的疲勞度檢測裝置，其特征在于：還包括APP模塊，所述APP模塊通過BLE與WIFI協(xié)議與人臉信號處理模塊無線連接通信。

3.根據(jù)權(quán)利要求1所述的基于人臉識別、關(guān)鍵點檢測的疲勞度檢測裝置，其特征在于：所述人臉信號處理模塊采用ESP32系列芯片作為處理器，所述ESP32系列芯片與人臉狀態(tài)采集模塊、語音模塊、GSP模塊通過UART連接，與感光模塊通過I2C連接；

具體如下：將IO19設(shè)為TXD1接口，IO18設(shè)為RXD1接口與人臉狀態(tài)采集模塊連接，雙向通信；將IO32設(shè)為RXD2接口與GPS模塊連接，單向接收GPS數(shù)據(jù)；將IO33設(shè)為TXD2接口與語音模塊連接，單向發(fā)送指令；將IO20設(shè)為CLK接口，IO21設(shè)為SD0接口，與感光模塊連接，雙向通信。

4.根據(jù)權(quán)利要求3所述的基于人臉識別、關(guān)鍵點檢測的疲勞度檢測裝置，其特征在于：所述ESP32支持兩種無線連接方式：BLE和WIFI；且支持OTA功能。

5.基于人臉識別、關(guān)鍵點檢測的疲勞度檢測方法，其特征在于：包括人臉注冊階段和疲勞度檢測階段；

所述人臉注冊階段：先提取駕駛員的人臉特征，再與人臉庫進(jìn)行人臉對比，如果未找到人臉特征，語音提示保持正常駕駛姿勢，并啟用關(guān)鍵點檢測，記錄正常狀態(tài)下駕駛員的人臉信息，所述人臉信息包括人臉特征值、眼睛完全睜開時的大小E₀，最后將人臉信息寫入人臉庫中；如果找到人臉特征，則讀取人臉庫中的人臉信息；

所述疲勞度檢測階段：先得到人臉特征中的關(guān)鍵點，計算當(dāng)前瞳孔大小E₁，若E₁/E₀的值小于第一閾值，則閉眼狀態(tài)S₀加上持續(xù)時間；反之若E₁/E₀的值大于等于第一閾值，睜眼狀態(tài)S₁加上持續(xù)時間，計算一分鐘內(nèi)S₀/(S₀+S₁)的值，若大于第二閾值且存在連續(xù)閉眼狀態(tài)，則觸發(fā)疲勞報警。