[發明專利]車輛內外信息融合的方法、控制裝置、處理器及車輛

在審

• 申請號: 202210738337.7
• 申請日: 2022-06-27
• 公開（公告）號: CN115187942A
• 公開（公告）日: 2022-10-14
• 發明（設計）人: 馬菲菲;劉曄;高仕寧;李超;孫濤;陳興;林源;柳菁;強一丁;朱靜
• 申請（專利權）人: 中國第一汽車股份有限公司
• 主分類號: G06V20/56
• 分類號: G06V20/56;G06V20/59;G06V40/16;G06V40/20;G06V10/80
• 代理公司: 北京博浩百睿知識產權代理有限責任公司 11134
• 代理人: 謝湘寧

1.一種車輛內外信息融合的方法，其特征在于，包括：

獲取車輛的車內目標對象的信息，以及所述車輛的車外目標對象的信息，其中，所述目標對象的信息包括如下至少之一：目標對象的人臉信息、動作信息、面部表情信息、心率信息；

結合預置數學模型，將所述車內目標對象的信息與所述車外目標對象的信息進行融合，獲得融合信息，其中，所述融合信息用于表征所述車內目標對象與所述車外目標對象在同一時刻的場景信息，所述場景信息包括如下至少之一：下車場景信息、上車場景信息、車內場景信息、車外場景信息。

2.根據權利要求1所述的方法，其特征在于，將所述車內目標對象的信息與所述車外目標對象的信息進行融合，獲得融合信息，包括：

采集第一時刻所述車內目標對象的人臉信息；

采集第二時刻所述車外目標對象的人臉信息，其中，所述第一時刻位于所述第二時刻之前；

判斷所述車內目標對象的人臉信息與所述車外目標對象的人臉信息是否相同；

如果是，生成所述下車場景信息。

3.根據權利要求1所述的方法，其特征在于，將所述車內目標對象的信息與所述車外目標對象的信息進行融合，獲得融合信息，包括：

采集第三時刻所述車內目標對象的人臉信息；

采集第四時刻所述車外目標對象的人臉信息，其中，所述第三時刻位于所述第四時刻之后；

判斷所述車內目標對象的人臉信息與所述車外目標對象的人臉信息是否相同；

如果是，生成所述上車場景信息。

4.根據權利要求1所述的方法，其特征在于，將所述車內目標對象的信息與所述車外目標對象的信息進行融合，獲得融合信息，包括：

采集車內目標對象的心率信息、面部表情信息以及動作信息；

將所述車內目標對象的心率信息與預置心率范圍進行比較，獲得第一比較結果；

將所述車內目標對象的面部表情信息與預置表情進行比較，獲得第二比較結果；

將所述車內目標對象的動作信息與第一預置動作進行比較，獲得第三比較結果；

基于所述第一比較結果、第二比較結果以及所述第三比較結果，生成所述車內場景信息，所述車內場景信息包括如下至少之一：目標對象的疲勞狀態、目標對象的情緒狀態、目標對象的開車門的動作信息、目標對象的關車門的動作信息、目標對象的抓握方向盤的動作信息。

5.根據權利要求1所述的方法，其特征在于，將所述車內目標對象的信息與所述車外目標對象的信息進行融合，獲得融合信息，包括：

采集車外目標對象的動作信息；

將所述車外目標對象的動作信息與第二預置動作進行比較，獲得第四比較結果；

基于所述第四比較結果，生成所述車外場景信息，所述車外場景信息包括如下至少之一：目標對象遠離車輛預設距離內的行為信息、目標對象的開車門的動作信息、目標對象的關車門的動作信息。

6.根據權利要求1所述的方法，其特征在于，獲取車輛的車內目標對象的信息，以及所述車輛的車外目標對象的信息，包括：

通過檢測元件檢測所述車內目標對象的信息以及所述車外目標對象的信息，所述檢測元件包括如下至少之一：攝像頭、離手探測傳感器、心率傳感器、雷達傳感器、紅外傳感器、射頻傳感器。

7.一種車輛內外信息融合的控制裝置，其特征在于，包括：

獲取模塊，所述獲取模塊用于獲取車輛的車內目標對象的信息，以及所述車輛的車外目標對象的信息，其中，所述目標對象的信息包括如下至少之一：目標對象的人臉信息、動作信息、面部表情信息、心率信息；

融合模塊，所述融合模塊用于結合預置數學模型，將所述車內目標對象的信息與所述車外目標對象的信息進行融合，獲得融合信息，其中，所述融合信息用于表征所述車內目標對象與所述車外目標對象在同一時刻的場景信息，所述場景信息包括如下至少之一：下車場景信息、上車場景信息、車內場景信息、車外場景信息。