[發明專利]駕駛狀態監測方法和裝置、駕駛員監控系統、車輛

有效

• 申請號: 201880003399.5
• 申請日: 2018-04-25
• 公開（公告）號: CN109937152B
• 公開（公告）日: 2022-03-25
• 發明（設計）人: 王飛;錢晨
• 申請（專利權）人: 北京市商湯科技開發有限公司
• 主分類號: B60K28/06
• 分類號: B60K28/06;B60W40/08;G08B21/06
• 代理公司: 北京思源智匯知識產權代理有限公司 11657
• 代理人: 毛麗琴

1.一種駕駛狀態監測方法，其特征在于，包括：

對駕駛員圖像進行駕駛員狀態檢測；所述駕駛員狀態檢測包括駕駛員預定分心動作檢測；

根據駕駛員狀態檢測的結果，輸出駕駛員的駕駛狀態監測結果和/或進行智能駕駛控制；

所述對駕駛員圖像進行預定分心動作檢測，包括：所述預定分心動作為飲食動作/喝水動作/打電話動作/娛樂動作時，經第五神經網絡對所述駕駛員圖像進行所述飲食動作/喝水動作/打電話動作/娛樂動作相應的預設目標對象檢測，得到預設目標對象的檢測框；所述預設目標對象包括：手部、嘴部、眼部、目標物體；所述目標物體包括以下任意一類或多類：容器、食物、電子設備；根據所述預設目標對象的檢測框確定分心動作的檢測結果。

2.根據權利要求1所述的方法，其特征在于，所述駕駛員狀態檢測還包括以下任意一項或多項：駕駛員疲勞狀態檢測，駕駛員分心狀態檢測。

3.根據權利要求2所述的方法，其特征在于，所述對駕駛員圖像進行駕駛員疲勞狀態檢測，包括：

對所述駕駛員圖像中駕駛員的人臉至少部分區域進行檢測，得到人臉至少部分區域的狀態信息，所述人臉至少部分區域的狀態信息包括以下任意一項或多項：眼睛睜合狀態信息、嘴巴開合狀態信息；

根據一段時間內的所述人臉至少部分區域的狀態信息，獲取用于表征駕駛員疲勞狀態的指標的參數值；

根據用于表征駕駛員疲勞狀態的指標的參數值確定駕駛員疲勞狀態檢測的結果。

4.根據權利要求3所述的方法，其特征在于，所述用于表征駕駛員疲勞狀態的指標包括以下任意一項或多項：閉眼程度、打哈欠程度。

5.根據權利要求4所述的方法，其特征在于，所述閉眼程度的參數值包括以下任意一項或多項：閉眼次數、閉眼頻率、閉眼持續時長、閉眼幅度、半閉眼次數、半閉眼頻率；和/或，

所述打哈欠程度的參數值包括以下任意一項或多項：打哈欠狀態、打哈欠次數、打哈欠持續時長、打哈欠頻率。

6.根據權利要求2所述的方法，其特征在于，所述對駕駛員圖像進行駕駛員分心狀態檢測，包括：

對所述駕駛員圖像中駕駛員進行人臉朝向和/或視線方向檢測，得到人臉朝向信息和/或視線方向信息；

根據一段時間內的所述人臉朝向信息和/或視線方向信息，確定用于表征駕駛員分心狀態的指標的參數值；所述用于表征駕駛員分心狀態的指標包括以下任意一項或多項：人臉朝向偏離程度，視線偏離程度；

根據用于表征所述駕駛員分心狀態的指標的參數值確定駕駛員分心狀態檢測的結果。

7.根據權利要求6所述的方法，其特征在于，所述人臉朝向偏離程度的參數值包括以下任意一項或多項：轉頭次數、轉頭持續時長、轉頭頻率；和/或，

所述視線偏離程度的參數值包括以下任意一項或多項：視線方向偏離角度、視線方向偏離時長、視線方向偏離頻率。

8.根據權利要求6所述的方法，其特征在于，所述對駕駛員圖像進行人臉朝向和/或視線方向檢測，包括：

檢測所述駕駛員圖像的人臉關鍵點；

根據所述人臉關鍵點進行人臉朝向和/或視線方向檢測。

9.根據權利要求8所述的方法，其特征在于，根據所述人臉關鍵點進行人臉朝向檢測，得到人臉朝向信息，包括：

根據所述人臉關鍵點獲取頭部姿態的特征信息；

根據所述頭部姿態的特征信息確定人臉朝向信息。

10.根據權利要求9所述的方法，其特征在于，所述根據所述人臉關鍵點獲取頭部姿態的特征信息，根據所述頭部姿態的特征信息確定人臉朝向信息，包括：

經第一神經網絡基于所述人臉關鍵點提取頭部姿態的特征信息；

經第二神經網絡基于所述頭部姿態的特征信息進行人臉朝向估計，獲得人臉朝向信息。