[發明專利]駕駛艙預警提示信息確定方法、裝置及存儲介質

在審

• 申請號: 202310107342.2
• 申請日: 2023-01-19
• 公開（公告）號: CN116152787A
• 公開（公告）日: 2023-05-23
• 發明（設計）人: 殷嬌陽
• 申請（專利權）人: 國汽智控（北京）科技有限公司
• 主分類號: G06V20/59
• 分類號: G06V20/59;G06V20/40;G06V40/16;G06V10/80;G06V10/762
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 陳亞男;劉芳

1.一種駕駛艙預警提示信息確定方法，其特征在于，所述方法包括：

獲取駕駛員的人臉姿勢特征視頻流；其中，所述人臉姿勢特征視頻流包括第一預設數量的圖像幀；

根據所述第一預設數量的圖像幀和所述預警模型，確定相應的特征圖；

基于所述預警模型對所述特征圖進行幀間特征融合，得到融合特征圖；

根據所述融合特征圖，確定所述人臉姿勢特征視頻流的分類結果，并根據所述分類結果，確定相應的預警提示信息。

2.根據權利要求1所述的方法，其特征在于，所述根據所述第一預設數量的圖像幀和所述預警模型，確定相應的特征圖，包括：

對所述第一預設數量的圖像幀進行聚類分析，得到第二預設數量的聚類后的圖像幀集；

基于所述預警模型對所述圖像幀集提取特征，生成相應的特征圖；其中，所述特征圖的數量為第二預設數量。

3.根據權利要求2所述的方法，其特征在于，所述基于所述預警模型對所述圖像幀集提取特征，生成相應的特征圖，包括：

在每一個所述圖像幀集中獲取一幀聚類圖像幀；其中，所述聚類圖像幀的幀數等于第二預設數量；

基于所述預警模型對每一幀所述聚類圖像幀提取特征，生成相應的特征圖。

4.根據權利要求1所述的方法，其特征在于，所述基于所述預警模型對所述特征圖進行幀間特征融合，得到融合特征圖，包括：

基于所述預警模型對所述特征圖進行幀間信息交換，得到交換后的幀間特征圖；

基于所述預警模型將所述交換后的幀間特征圖與所述特征圖進行幀間特征融合，得到融合特征圖。

5.根據權利要求1-4任一項所述的方法，其特征在于，所述預警模型是由多個標注了分類結果的人臉姿勢特征視頻流訓練后得到的。

6.根據權利要求1所述的方法，其特征在于，所述根據所述分類結果，確定相應的預警提示信息，包括：

若所述分類結果為疲勞狀態，則確定發出所述相應的預警提示信息；

若所述分類結果為非疲勞狀態，則確定不發出所述相應的預警提示信息。

7.根據權利要求6所述的方法，其特征在于，所述疲勞狀態的表征類型包括：眼部特征、嘴部特征或頭部特征，則所述若所述分類結果為疲勞狀態，則確定發出所述相應的預警提示信息，包括：

若所述疲勞狀態的表征類型為眼部特征，則確定發出與所述眼部特征對應的預警提示信息；

若所述疲勞狀態的表征類型為嘴部特征，則確定發出與所述嘴部特征對應的預警提示信息；

若所述疲勞狀態的表征類型為頭部特征，則確定發出與所述頭部特征對應的預警提示信息。

8.一種駕駛艙預警提示信息確定裝置，其特征在于，所述裝置包括：

獲取單元，用于獲取駕駛員的人臉姿勢特征視頻流；其中，所述人臉姿勢特征視頻流包括第一預設數量的圖像幀；

第一確定單元，用于根據所述第一預設數量的圖像幀和所述預警模型，確定相應的特征圖；

融合單元，用于基于所述預警模型對所述特征圖進行幀間特征融合，得到融合特征圖；

第二確定單元，用于根據所述融合特征圖，確定所述人臉姿勢特征視頻流的分類結果，并根據所述分類結果，確定相應的預警提示信息。

9.一種電子設備，其特征在于，包括：處理器，以及與所述處理器通信連接的存儲器；

所述存儲器存儲計算機執行指令；

所述處理器執行所述存儲器存儲的計算機執行指令，以實現如權利要求1-7中任一項所述的方法。

10.一種計算機可讀存儲介質，其特征在于，所述計算機可讀存儲介質中存儲有計算機執行指令，所述計算機執行指令被處理器執行時用于實現如權利要求1-7中任一項所述的方法。

11.一種計算機程序產品，其特征在于，包括計算機程序，該計算機程序被處理器執行時實現如權利要求1-7中任一項所述的方法。