[發明專利]疲勞狀態檢測方法、裝置、介質及電子設備

在審

• 申請號: 202011395029.6
• 申請日: 2020-12-03
• 公開（公告）號: CN112528792A
• 公開（公告）日: 2021-03-19
• 發明（設計）人: 楊聰;楊振宇;李威宇
• 申請（專利權）人: 深圳地平線機器人科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 北京思源智匯知識產權代理有限公司 11657
• 代理人: 毛麗琴

公開了一種疲勞狀態檢測方法、裝置、介質及設備，其中的方法包括：從設置于移動設備中的攝像裝置采集獲得的多個視頻幀中，獲取包含有目標對象的器官區域的圖像塊，得到基于所述器官區域的圖像塊序列；基于所述器官區域的圖像塊序列，確定所述目標對象的疲勞狀態類型；若所述疲勞狀態類型符合第一預設類型，向云端服務器發送所述圖像塊序列，使所述云端服務器基于圖像塊序列檢測所述目標對象的疲勞等級；接收云端服務器返回的所述目標對象的疲勞等級信息。本公開提供的技術方案有利于提高疲勞狀態檢測的準確性，從而有利于提高移動設備的行駛安全。另外，本公開提供的技術方案在有利于保護用戶隱私的同時，還能降低向云端服務器傳輸圖像的數據量。

技術領域

本公開涉及計算機視覺技術，尤其是涉及一種疲勞狀態檢測方法、疲勞狀態檢測裝置、存儲介質以及電子設備。

背景技術

在駕駛領域中，由于駕駛員的疲勞駕駛是車輛等移動設備行駛過程中的一個不安全隱患，對移動設備安全行駛的影響較大，因此，對駕駛員進行疲勞狀態檢測是DMS(DriverMonitor System，駕駛員監控系統)中的一項重要內容。相比于傳統的基于接觸式的疲勞狀態檢測技術而言，基于計算機視覺的疲勞狀態檢測技術，由于其具有易用性較強，且實現成本較低等特點，而被廣泛應用。

基于計算機視覺的疲勞狀態檢測過程通常為：利用設置于移動設備內的攝像裝置針對駕駛員進行拍攝，攝像裝置采集到的視頻幀被實時的提供給DMS，由DMS對其接收到的視頻幀進行處理，以確定駕駛員當前是否處于疲勞狀態。

如何準確的識別出駕駛員當前所處的疲勞狀態，以保證移動設備的安全行駛，是一個值得關注的技術問題。

發明內容

為了解決上述技術問題，提出了本公開。本公開的實施例提供了一種疲勞狀態檢測方法、裝置、存儲介質以及電子設備。

根據本公開實施例的一個方面，提供一種疲勞狀態檢測方法，包括：從設置于移動設備中的攝像裝置采集獲得的多個視頻幀中，獲取包含有目標對象的器官區域的圖像塊，得到基于所述器官區域的圖像塊序列；根據所述圖像塊序列，確定所述目標對象的疲勞狀態類型；若所述疲勞狀態類型符合第一預設類型，向云端服務器發送所述圖像塊序列，所述云端服務器基于所述圖像塊序列檢測所述目標對象的疲勞等級；接收所述云端服務器返回的所述目標對象的疲勞等級信息。

根據本公開實施例的另一個方面，提供一種疲勞狀態檢測裝置，包括：獲取序列模塊，用于從設置于移動設備中的攝像裝置采集獲得的多個視頻幀中，獲取包含有目標對象的器官區域的圖像塊，得到基于所述器官區域的圖像塊序列；確定類型模塊，用于根據所述獲取序列模塊獲得的圖像塊序列，確定所述目標對象的疲勞狀態類型；判決模塊，用于若所述確定類型模塊確定出的疲勞狀態類型符合第一預設類型，向云端服務器發送所述圖像塊序列，使所述云端服務器基于所述圖像塊序列檢測所述目標對象的疲勞等級；接收模塊，用于接收所述云端服務器返回的所述目標對象的疲勞等級信息。

根據本公開實施例的又一個方面，提供了一種計算機可讀存儲介質，所述存儲介質存儲有計算機程序，所述計算機程序用于實現上述方法。

根據本公開實施例的再一個方面，提供了一種電子設備，包括：處理器；用于存儲所述處理器可執行指令的存儲器；所述處理器，用于從所述存儲器中讀取所述可執行指令，并執行所述指令以實現上述方法。

基于本公開上述實施例提供的一種疲勞狀態檢測方法和裝置，通過在移動設備確定出目標對象的疲勞狀態類型符合第一預設類型時，向云端服務器發送圖像塊序列，使云端服務器可以基于圖像塊序列向移動設備提供目標對象的疲勞等級，從而實現了端云結合的疲勞狀態檢測；由于云端服務器的計算資源強于移動設備處的計算資源，因此，云端服務器能夠對圖像塊序列進行更精準的疲勞狀態檢測，有利于提高疲勞檢測的準確性，從而有利于提高移動設備的行駛安全。另外，由于移動設備端向云端服務器發送的信息為僅包含目標對象的器官區域的圖像塊序列，而非包含有目標對象的整個面部區域的視頻幀，因此，在有利于保護用戶隱私的同時，還能降低移動設備端向云端服務器傳輸圖像的數據量。