[發(fā)明專利]監(jiān)測(cè)駕駛員狀態(tài)的方法、設(shè)備、系統(tǒng)、處理器及存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 201810210707.3
• 申請(qǐng)日: 2018-03-14
• 公開(kāi)（公告）號(hào): CN110163037B
• 公開(kāi)（公告）日: 2022-03-04
• 發(fā)明（設(shè)計(jì)）人: 余貴珍;雷傲;王云鵬;胡哲華;胡超偉
• 申請(qǐng)（專利權(quán)）人: 北京航空航天大學(xué)
• 主分類號(hào): G06V20/59
• 分類號(hào): G06V20/59;G06V40/16;G06V40/18;G06V10/44;G06V10/764;G06K9/62
• 代理公司: 北京知匯林知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11794
• 代理人: 董濤

1.一種監(jiān)測(cè)駕駛員狀態(tài)的方法，其特征在于，包括獲取駕駛員的臉部圖像；

從所述臉部圖像提取特征；

基于所提取的特征，判定所述駕駛員的當(dāng)前狀態(tài)包括：根據(jù)多個(gè)特征的位置信息，計(jì)算臉部各區(qū)域的參數(shù)，將所計(jì)算的參數(shù)與預(yù)設(shè)的參數(shù)進(jìn)行比對(duì)，判定當(dāng)前駕駛員駕駛狀態(tài)；計(jì)算的參數(shù)包括以下各參數(shù)中的至少一個(gè)參數(shù)：閉眼時(shí)長(zhǎng)、眨眼頻率、手部在耳部區(qū)域中存在的時(shí)長(zhǎng)、嘴部被遮擋的頻率、打呵欠的頻率、下巴運(yùn)動(dòng)的頻率；還包括通過(guò)以下操作計(jì)算所述閉眼時(shí)長(zhǎng)：計(jì)算預(yù)定時(shí)間內(nèi)眼睛閉合的時(shí)間長(zhǎng)度，其中所述眼睛的閉合是根據(jù)眼部區(qū)域中的圖像來(lái)確定的，根

據(jù)得到的眼部圖像信息，對(duì)左眼區(qū)域眼睛閉合程度進(jìn)行判斷，，

其中，為左眼閉合程度，為輸入的左眼區(qū)域圖像信息，為左眼閉合判斷函數(shù)，左眼區(qū)域圖像信息是通過(guò)特征點(diǎn)確定的圖像區(qū)域的信息，左眼閉合判斷函數(shù)計(jì)算方法如下：

其中，回歸參數(shù)與偏置參數(shù)通過(guò)訓(xùn)練數(shù)據(jù)求得，共計(jì)i層，用于與區(qū)域圖像信息進(jìn)行計(jì)算，f代表激活函數(shù)：；還包括獲取從駕駛員上方拍攝的俯視圖圖像；從所述俯視圖圖像提取特征，以及判定所述駕駛員的當(dāng)前狀態(tài)的操作還包括從所述俯視圖圖像提取的特征判定所述駕駛員的當(dāng)前狀態(tài)，

從俯視圖圖像提取的特征包括駕駛員的手部以及手機(jī)的位置， 在駕駛席俯視圖像中，需要從中檢測(cè)是否有駕駛員手部以及是否存在手機(jī)，以及兩者對(duì)應(yīng)的位置坐標(biāo)信息，進(jìn)而得到駕駛員手部與手機(jī)的相對(duì)位置，具體的，可將駕駛席俯視圖像Ff輸入到目標(biāo)檢測(cè)器中，得到手機(jī)與手部的圖像位置與，如公式，

目標(biāo)檢測(cè)器的計(jì)算方法與左眼閉合判斷函數(shù)類似，具體的，在使用目標(biāo)檢測(cè)器時(shí)，首先需要對(duì)圖像的分辨率進(jìn)行調(diào)整，令圖像寬高、均為224個(gè)像素，然后依靠目標(biāo)檢測(cè)器中的N層卷積特征提取器從調(diào)整后的中提取特征，以得到各層的多個(gè)卷積特征圖，

其中，代表第l層的第j個(gè)特征圖數(shù)值，代表第l層的第j個(gè)卷積參數(shù)，b代表對(duì)應(yīng)的偏置，f代表激活函數(shù)；

以及基于所判定的當(dāng)前狀態(tài)發(fā)出警報(bào)，其中所述特征包括所述臉部圖像上的多個(gè)特征點(diǎn)的位置信息。

2.一種存儲(chǔ)介質(zhì)，其特征在于，所述存儲(chǔ)介質(zhì)包括存儲(chǔ)的程序，其中，在所述程序運(yùn)行時(shí)控制所述存儲(chǔ)介質(zhì)所在設(shè)備執(zhí)行權(quán)利要求1中所述的方法。

3.一種處理器，其特征在于，所述處理器用于運(yùn)行程序，其中，所述程序運(yùn)行時(shí)執(zhí)行權(quán)利要求1所述的方法。