[發明專利]一種疲勞駕駛的檢測方法、裝置、計算機設備和存儲介質

有效

• 申請號: 202010601635.2
• 申請日: 2020-06-28
• 公開（公告）號: CN111645695B
• 公開（公告）日: 2022-08-09
• 發明（設計）人: 王珂堯;馮浩城;岳海瀟
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: B60W40/08
• 分類號: B60W40/08;B60W40/00;G06V20/59
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

1.一種疲勞駕駛的檢測方法，包括：

實時獲取與交通工具駕駛員匹配的人臉圖像幀，并獲取與所述人臉圖像幀對應的至少一個疲勞檢測器官的器官圖像；

獲取與所述人臉圖像幀的各器官圖像分別對應的狀態分類結果；

根據與多張連續獲取的人臉圖像幀分別對應各器官圖像的狀態分類結果，計算與各疲勞檢測器官分別對應的長時分類結果；

根據與各疲勞檢測器官分別對應的長時分類結果，對所述駕駛員進行疲勞檢測；其中，所述長時分類結果為與各疲勞檢測器官分別對應的在設定時間內獲取的多張人臉圖像幀中獲得的綜合狀態分類結果；

其中，所述獲取與所述人臉圖像幀的各器官圖像分別對應的狀態分類結果，包括：

將所述人臉圖像幀的各器官圖像分別輸入至與器官圖像匹配的狀態分類模型中，獲取與各所述器官圖像對應的第一分類結果；

根據與各所述器官圖像分別對應的多個器官關鍵點之間的相對位置關系，獲取與各所述器官圖像對應的第二分類結果；

根據所述第一分類結果和所述第二分類結果，確定與各所述器官圖像對應的狀態分類結果；

其中，所述根據與多張連續獲取的人臉圖像幀分別對應各器官圖像的狀態分類結果，計算與各疲勞檢測器官分別對應的長時分類結果，包括：

在當前人臉圖像幀和設定數量的歷史人臉圖像幀中，分別獲取各器官圖像的狀態分類結果；

確定與所述當前人臉圖像幀以及各所述歷史人臉圖像幀分別對應的檢測權重；

其中，所述檢測權重與人臉圖像幀的獲取時間差負相關，所述獲取時間差為人臉圖像幀的獲取時間與當前系統時間的時間差；

根據當前人臉圖像幀和各歷史人臉圖像幀中，各器官圖像的狀態分類結果，以及與當前人臉圖像幀和各歷史人臉圖像幀分別對應的檢測權重，計算各器官圖像的狀態累加結果；

根據所述狀態累加結果和預設的長時分類權重，計算各疲勞檢測器官的長時分類結果；

其中，所述獲取與所述人臉圖像幀對應的至少一個疲勞檢測器官的器官圖像，包括：在人臉圖像幀中識別人臉區域，具體為：

將所述人臉圖像幀輸入至人臉框檢測模型中，獲取人臉框檢測模型輸出的多個人臉框坐標；

根據各人臉框坐標，在所述人臉圖像幀中確定人臉區域。

2.根據權利要求1所述的方法，其特征在于，獲取與所述人臉圖像幀對應的至少一個疲勞檢測器官的器官圖像，還包括：

在所述人臉區域內，獲取多個人臉關鍵點；

根據所述多個人臉關鍵點，獲取與所述人臉圖像幀對應的至少一個疲勞檢測器官的器官圖像。

3.根據權利要求1-2任一項所述的方法，其特征在于，疲勞檢測器官的器官圖像包括：與左眼對應的左眼圖像、與右眼對應的右眼圖像以及與嘴巴對應的嘴巴圖像；

所述狀態分類結果包括：打開或者閉合。

4.根據權利要求2所述的方法，其特征在于，所述根據所述多個人臉關鍵點，獲取與所述人臉圖像幀對應的至少一個疲勞檢測器官的器官圖像，包括下述至少一項：

根據人臉關鍵點中與左眼對應的兩個眼角坐標，計算左眼的眼角距離；根據左眼的眼角距離和人臉關鍵點中左眼的中心點坐標，計算與左眼對應的左眼仿射變換矩陣，并根據左眼仿射變換矩陣，在人像采集圖像中確定左眼圖像；

根據人臉關鍵點中與右眼對應的兩個眼角坐標，計算右眼的眼角距離；根據右眼的眼角距離和人臉關鍵點中右眼的中心點坐標，計算與右眼對應的右眼仿射變換矩陣，并根據右眼仿射變換矩陣，在所述人像采集圖像中確定右眼圖像；以及

根據人臉關鍵點中與嘴巴對應的兩個嘴角坐標，計算嘴巴的嘴角距離；根據嘴巴的嘴角距離和人臉關鍵點中嘴巴的中心點坐標，計算與嘴巴對應的嘴巴仿射變換矩陣，并根據嘴巴仿射變換矩陣，在所述人像采集圖像中確定嘴巴圖像。