[發(fā)明專利]車輛駕駛狀態(tài)的監(jiān)控方法、車輛和計算機可讀存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202011025167.5
• 申請日: 2020-09-25
• 公開（公告）號: CN112215097A
• 公開（公告）日: 2021-01-12
• 發(fā)明（設(shè)計）人: 夏健平;賀志國;肖劍明
• 申請（專利權(quán)）人: 三一專用汽車有限責(zé)任公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京友聯(lián)知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11343
• 代理人: 汪海屏;王淑梅

1.一種車輛駕駛狀態(tài)的監(jiān)控方法，其特征在于，所述車輛包括駕駛室，所述駕駛室中設(shè)置有媒體采集裝置，所述監(jiān)控方法包括：

通過所述媒體采集裝置獲取所述駕駛室內(nèi)的媒體信息，根據(jù)所述媒體信息確定駕駛員的情緒狀態(tài)；

根據(jù)所述情緒狀態(tài)，控制所述車輛執(zhí)行對應(yīng)的操作。

2.根據(jù)權(quán)利要求1所述的車輛駕駛狀態(tài)的監(jiān)控方法，其特征在于，所述根據(jù)所述媒體信息確定所述駕駛員的情緒狀態(tài)，具體包括：

根據(jù)所述媒體信息確定駕駛員的情緒數(shù)據(jù)集；

將所述情緒數(shù)據(jù)集輸入至情緒識別模型中，并獲取所述情緒識別模型輸出的所述情緒狀態(tài)。

3.根據(jù)權(quán)利要求2所述的車輛駕駛狀態(tài)的監(jiān)控方法，其特征在于，所述媒體信息包括圖像信息和音頻信息；以及

所述根據(jù)所述媒體信息確定駕駛員的情緒數(shù)據(jù)集，具體包括：

通過人臉檢測算法，在所述圖像信息中提取所述駕駛員的人臉圖像數(shù)據(jù)；

在所述音頻信息中分離所述駕駛員的聲音數(shù)據(jù)；

對所述人臉圖像和所述聲音數(shù)據(jù)進(jìn)行特征提取，得到所述情緒數(shù)據(jù)集。

4.根據(jù)權(quán)利要求2所述的車輛駕駛狀態(tài)的監(jiān)控方法，其特征在于，在所述將所述情緒數(shù)據(jù)集輸入至情緒識別模型中之前，所述監(jiān)控方法還包括：

獲取預(yù)設(shè)的情緒數(shù)據(jù)訓(xùn)練集；

將初始神經(jīng)網(wǎng)絡(luò)模型輸入所述情緒數(shù)據(jù)訓(xùn)練集，通過所述情緒數(shù)據(jù)訓(xùn)練集訓(xùn)練所述神經(jīng)網(wǎng)絡(luò)模型，以得到所述情緒識別模型。

5.根據(jù)權(quán)利要求1至4中任一項所述的車輛駕駛狀態(tài)的監(jiān)控方法，其特征在于，所述根據(jù)所述情緒狀態(tài)，控制所述車輛執(zhí)行對應(yīng)的操作，具體包括：

根據(jù)所述情緒狀態(tài)確定情緒類型和對應(yīng)的情緒強度；

根據(jù)所述情緒類型和對應(yīng)的所述情緒強度，確定目標(biāo)媒體文件；

控制所述車輛播放所述媒體文件。

6.根據(jù)權(quán)利要求5所述的車輛駕駛狀態(tài)的監(jiān)控方法，其特征在于，所述根據(jù)所述情緒狀態(tài)，控制所述車輛執(zhí)行對應(yīng)的操作，還包括：

基于所述情緒類型為目標(biāo)情緒類型，且所述情緒強度高于情緒強度閾值的情況，生成對應(yīng)的報警信息；

控制所述車輛播放所述報警信息，并將所述報警信息發(fā)送至對應(yīng)的服務(wù)器。

7.根據(jù)權(quán)利要求1至4中任一項所述的車輛駕駛狀態(tài)的監(jiān)控方法，其特征在于，還包括：

獲取所述車輛的行駛數(shù)據(jù)，根據(jù)所述行駛數(shù)據(jù)判斷所述車輛是否處于變道狀態(tài)；

基于所述車輛處于所述變道狀態(tài)中，獲取所述變道狀態(tài)對應(yīng)的目標(biāo)車道信息，與所述目標(biāo)車道信息對應(yīng)的外部車輛位置；

根據(jù)所述目標(biāo)車道信息和所述外部車輛位置生成對應(yīng)的提示信息；

控制所述車輛播放所述變道提示信息。

8.根據(jù)權(quán)利要求7所述的車輛駕駛狀態(tài)的監(jiān)控方法，其特征在于，

所述行駛數(shù)據(jù)包括行駛速度、行駛加速度和/或車道信息。

9.一種車輛，其特征在于，包括：

駕駛室，所述駕駛室中設(shè)置有媒體采集裝置，所述媒體采集裝置包括圖像采集裝置和音頻采集裝置；

存儲器，被配置為存儲計算機程序；

處理器，與所述存儲器、所述圖像采集裝置和所述音頻采集裝置相連接，所述處理器被配置為執(zhí)行所述計算機程序時實現(xiàn)如權(quán)利要求1至8中任一項所述的車輛駕駛狀態(tài)的監(jiān)控方法的步驟。

10.一種計算機可讀存儲介質(zhì)，其上存儲有計算機程序，其特征在于，所述計算機程序被處理器執(zhí)行時實現(xiàn)如權(quán)利要求1至8中任一項所述的車輛駕駛狀態(tài)的監(jiān)控方法的步驟。