[發(fā)明專利]基于深度學(xué)習(xí)的駕駛?cè)藸顟B(tài)監(jiān)測(cè)方法、系統(tǒng)、介質(zhì)及設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 201710716216.1
• 申請(qǐng)日: 2017-08-18
• 公開(kāi)（公告）號(hào): CN109409173B
• 公開(kāi)（公告）日: 2021-06-04
• 發(fā)明（設(shè)計(jì)）人: 金會(huì)慶;王江波;李偉;程澤良;馬曉峰
• 申請(qǐng)（專利權(quán)）人: 安徽三聯(lián)交通應(yīng)用技術(shù)股份有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/62
• 代理公司: 上海光華專利事務(wù)所(普通合伙) 31219
• 代理人: 王華英

1.一種基于深度學(xué)習(xí)的駕駛?cè)藸顟B(tài)監(jiān)測(cè)方法，其特征在于，包括：

初始化圖像信息采集設(shè)備及存儲(chǔ)設(shè)備，預(yù)設(shè)信息處理邏輯，完成初始化操作并發(fā)出提示信息；

接收所述提示信息，觸發(fā)特征信息檢測(cè)設(shè)備及圖像信息采集設(shè)備采集駕駛員的視頻數(shù)據(jù)，從所述視頻數(shù)據(jù)中提取單幀圖片信息獲得視頻圖片樣本；

提取當(dāng)前所述單幀圖片信息中的面部朝向特征信息和關(guān)注點(diǎn)角度信息，根據(jù)所述面部朝向特征信息和關(guān)注點(diǎn)角度信息構(gòu)建狀態(tài)檢測(cè)模型，根據(jù)所述視頻圖片樣本進(jìn)行所述狀態(tài)檢測(cè)模型深度學(xué)習(xí)，根據(jù)所述預(yù)設(shè)信息 處理邏輯處理所述面部朝向特征信息和關(guān)注點(diǎn)角度信息得面部關(guān)注檢測(cè)信息；

將所述單幀圖片信息、所述面部關(guān)注檢測(cè)信息和視頻數(shù)據(jù)存入隊(duì)列中，根據(jù)所述隊(duì)列產(chǎn)生駕駛狀態(tài)判定日志信息并存儲(chǔ)；

其中，從所述視頻數(shù)據(jù)中提取單幀圖片信息并保存為圖片樣本的步驟包括：

接收所述提示信息，根據(jù)提示信息開(kāi)啟攝像頭；

以攝像頭實(shí)時(shí)獲取駕駛?cè)说乃鲆曨l數(shù)據(jù)；

讀取所述視頻數(shù)據(jù)；

根據(jù)所述視頻數(shù)據(jù)及時(shí)間提取當(dāng)前的所述單幀圖片信息；

提取所述隊(duì)列中的所述單幀圖片信息得所述視頻圖片樣本；

獲取所述面部關(guān)注檢測(cè)信息，包括：

提取所述單幀圖片信息中的特征數(shù)據(jù)；

歸一化所述特征數(shù)據(jù)得到特征向量；

根據(jù)所述特征向量構(gòu)建所述狀態(tài)檢測(cè)模型；

根據(jù)所述視頻圖片樣本進(jìn)行深度學(xué)習(xí)，更新所述視頻圖片樣本；

對(duì)比所述特征向量與與上述視頻圖片樣本中觀察左B柱、左后視鏡、內(nèi)后視鏡、俯視儀表盤、右B柱、右后視鏡、正前方、低頭看檔八個(gè)動(dòng)作特征得相似信息；

對(duì)所述相似信息排序得所述面部關(guān)注檢測(cè)信息。

2.根據(jù)權(quán)利要求 1所述的方法，其特征在于，所述將所述單幀圖片信息、所述面部關(guān)注檢測(cè)信息和視頻數(shù)據(jù)存入隊(duì)列中，根據(jù)所述隊(duì)列產(chǎn)生駕駛狀態(tài)判定日志信息并存儲(chǔ)，包括：

提取所述視頻數(shù)據(jù)、所述單幀圖片信息和所述面部關(guān)注檢測(cè)信息；

將所述視頻數(shù)據(jù)存入圖像采集緩存隊(duì)列；

將所述單幀圖片信息存入單幀圖片緩存隊(duì)列；

將所述面部關(guān)注檢測(cè)信息存入算法輸出隊(duì)列；

根據(jù)所述圖片緩存隊(duì)列及所述算法輸出隊(duì)列生成駕駛?cè)说鸟{駛狀態(tài)判定日志信息并存入日志庫(kù)。