[發(fā)明專利]汽車駕駛員疲勞駕駛智能控制方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201711043515.X
• 申請(qǐng)日: 2017-10-31
• 公開（公告）號(hào): CN107697069B
• 公開（公告）日: 2020-07-28
• 發(fā)明（設(shè)計(jì)）人: 趙鵬倫
• 申請(qǐng)（專利權(quán)）人: 上海汽車集團(tuán)股份有限公司;上海汽車工業(yè)（集團(tuán)）總公司
• 主分類號(hào): B60W40/08
• 分類號(hào): B60W40/08;B60W50/14;G08B21/06;B60K28/06
• 代理公司: 上海科琪專利代理有限責(zé)任公司 31117
• 代理人: 伍賢喆

1.一種汽車駕駛員疲勞駕駛智能控制方法，疲勞駕駛智能控制系統(tǒng)基于車載近紅外圖像傳感器對(duì)駕駛員動(dòng)作和面部表情進(jìn)行識(shí)別，其特征是，包括以下步驟：

S1.在駕駛員面部、軀干和四肢各設(shè)置若干關(guān)鍵點(diǎn)進(jìn)行標(biāo)注；

S2.通過車載近紅外圖像傳感器對(duì)所有關(guān)鍵點(diǎn)進(jìn)行跟蹤，通過模擬檢測(cè)和深度雙向LSTM神經(jīng)網(wǎng)絡(luò)，訓(xùn)練出對(duì)動(dòng)作識(shí)別的模型，基于動(dòng)作識(shí)別的模型設(shè)定危險(xiǎn)動(dòng)作；

所述危險(xiǎn)動(dòng)作包括抽煙、打電話、打瞌睡、打哈欠、間歇性睜閉眼；

所述打瞌睡的動(dòng)作識(shí)別方式為，提取面部的關(guān)鍵點(diǎn)，建立駕駛員視線的正常觀測(cè)區(qū)域和點(diǎn)頭頻率閾值；然后根據(jù)面部關(guān)鍵點(diǎn)建立頭部3D姿態(tài)，根據(jù)3D姿態(tài)判斷點(diǎn)頭動(dòng)作的頻率并判斷視線是否偏離正常觀測(cè)區(qū)域，如偏離正常觀測(cè)區(qū)域的點(diǎn)頭動(dòng)作的頻率超過了點(diǎn)頭頻率閾值，則認(rèn)為駕駛員處于打瞌睡的狀態(tài)；

S3.通過人臉識(shí)別確認(rèn)駕駛員身份，并儲(chǔ)存為當(dāng)前駕駛員；

S4.在車輛行駛過程中實(shí)時(shí)獲取的視頻圖像提取出關(guān)鍵點(diǎn)的信息后與危險(xiǎn)動(dòng)作進(jìn)行匹配，如匹配出危險(xiǎn)動(dòng)作，則疲勞駕駛智能控制系統(tǒng)的報(bào)警器開始報(bào)警，提醒駕駛員注意安全駕駛或休息，并從正常行駛狀態(tài)變更為危險(xiǎn)駕駛控制狀態(tài)；

所述步驟S4中，如報(bào)警器開始報(bào)警，則同時(shí)進(jìn)行人臉識(shí)別確認(rèn)駕駛員身份，直到駕駛員身份與步驟S3中儲(chǔ)存的當(dāng)前駕駛員不相同，疲勞駕駛智能控制系統(tǒng)解除報(bào)警狀態(tài)，車輛恢復(fù)為正常行駛狀態(tài)；

所述危險(xiǎn)駕駛控制狀態(tài)采取的報(bào)警和控制方式包括，將危險(xiǎn)駕駛控制狀態(tài)分為若干等級(jí)，報(bào)警器針對(duì)每個(gè)等級(jí)配合不同的報(bào)警音量和音調(diào)；當(dāng)處于最高等級(jí)的危險(xiǎn)駕駛控制狀態(tài)時(shí)，疲勞駕駛智能控制系統(tǒng)會(huì)通過CAN網(wǎng)絡(luò)發(fā)信號(hào)給車身ECU，當(dāng)車身ECU收到此信號(hào)后會(huì)主動(dòng)減速，配合ADAS系統(tǒng)靠邊停車熄火。

2.如權(quán)利要求1所述的汽車駕駛員疲勞駕駛智能控制方法，其特征是：所述抽煙、打電話的動(dòng)作識(shí)別方式為，提取位于軀干上半身、手掌和胳膊的關(guān)鍵點(diǎn)，通過雙邊LSTM動(dòng)作識(shí)別匹配得到抽煙、打電話的動(dòng)作。

3.如權(quán)利要求1所述的汽車駕駛員疲勞駕駛智能控制方法，其特征是：所述打哈欠的動(dòng)作識(shí)別方式為，設(shè)定嘴唇張開閾值，提取面部的關(guān)鍵點(diǎn)并對(duì)駕駛員的嘴唇進(jìn)行定位，計(jì)算嘴唇張開程度，構(gòu)造SVM分類器后根據(jù)嘴唇張開閾值判斷是否打哈欠。

4.如權(quán)利要求1所述的汽車駕駛員疲勞駕駛智能控制方法，其特征是：所述間歇性睜閉眼的動(dòng)作識(shí)別方式為，提取面部的關(guān)鍵點(diǎn)并對(duì)駕駛員眼部進(jìn)行定位，然后提取出眼部特征，通過構(gòu)造SVM分類器判斷睜閉眼狀態(tài)。