[發明專利]一種面向自動駕駛智能座艙的多模態人機交互系統

在審

• 申請號: 202111528535.2
• 申請日: 2021-12-14
• 公開（公告）號: CN114443888A
• 公開（公告）日: 2022-05-06
• 發明（設計）人: 羅馬思陽;范晟華;郭健
• 申請（專利權）人: 蘇州安智汽車零部件有限公司
• 主分類號: G06F16/635
• 分類號: G06F16/635;G06V40/16;G06F3/16;G06F3/01;G06F1/3234
• 代理公司: 北京沁優知識產權代理有限公司 11684
• 代理人: 陳堅

本發明涉及智能座艙技術領域，公開了一種面向自動駕駛智能座艙的多模態人機交互系統，其技術方案要點是包括座艙，座艙內包括座椅組件、顯示屏、音響模塊和控制模塊，顯示屏上設置有攝像模塊，通過配置的識別駕駛人員策略，能夠根據駕駛人員來調取對應偏好數據中設定的歌單來提高駕駛人員的駕駛體驗，通過配置的目標狀態識別策略，能夠判定駕駛人員是否處于休息狀態，若駕駛人員正在休息則關閉顯示屏，減少能源的損耗，通過配置的距離提醒策略能夠判斷駕駛人員觀影距離是否距離顯示屏過近，若距離過近則通過揚聲器來發出提醒保持距離語音，避免駕駛人員和乘客在觀影時導致的近視，從而提升駕駛人員在座艙中的使用體驗。

技術領域

本發明涉及智能座艙技術領域，更具體的說是涉及一種面向自動駕駛智能座艙的多模態人機交互系統。

背景技術

隨著汽車的發展，自動駕駛汽車逐漸成為汽車產業發展的重要發展方向之一。而在現有具備自動駕駛的汽車中其駕駛座艙仍然較為傳統，駕駛人員通常通過語音或觸控的方式來實現控制車內的影音娛樂或駕駛座椅組件的按摩功能，智能化程度仍然有待提升。

發明內容

針對現有技術存在的不足，本發明的目的在于提供一種面向自動駕駛智能座艙的多模態人機交互系統，用于提升駕駛人員在座艙中的使用體驗。

為實現上述目的，本發明提供了如下技術方案：

一種面向自動駕駛智能座艙的多模態人機交互系統，包括座艙，所述座艙內包括座椅組件、顯示屏、音響模塊和控制模塊，所述顯示屏上設置有攝像模塊，所述座椅組件用以為駕駛人員和乘客提供座位；

所述音響模塊包括揚聲器單元，所述揚聲器單元用以播放音樂或提示語音；

所述控制模塊包括用戶數據庫和調取單元，所述用戶數據庫用以存儲預設的駕駛人員面部數據以及預設的偏好數據，預設的駕駛人員面部數據與預設的偏好數據一一對應，預設的偏好數據包括歌單，所述調取單元用以調取所述用戶數據庫中的預設的偏好數據的歌單；

所述攝像模塊包括人臉識別單元、目標狀態識別單元和人體距離計算單元，當駕駛人員坐在所述座椅組件上時，所述人臉識別單元識別駕駛人員面部，并生成實際駕駛人員面部數據，所述人體距離計算單元用以分別計算駕駛人員面部和乘客面部至所述顯示屏之間距離并分別生成對應的距離數值；

所述控制模塊配置有識別駕駛人員策略，所述識別駕駛人員策略：所述人臉識別單元將實際駕駛人員面部數據和預設的駕駛人員面部數據作比對，若實際駕駛人員的面部數據與所述用戶數據庫中預設的駕駛人員面部數據相匹配則生成調取指令，所述調取單元根據調取指令調取對應的預設的偏好數據中的歌單顯示在顯示屏上；

所述控制模塊配置有目標狀態識別策略，所述目標狀態識別策略：所述目標識別單元識別駕駛人員面部狀態并與預設駕駛人員休息時的面部狀態做比對，并生成面部狀態重合度，若面部狀態重合度大于預設駕駛人員休息時的面部狀態重合閾值時則判定駕駛人員正在休息，關閉所述顯示屏；

所述控制模塊配置有距離提醒策略，所述距離提醒策略：所述距離計算單元將距離數值與預設的距離閾值做比對，若距離數值小于預設的距離閾值生成提醒保持距離指令，所述揚聲器單元根據提醒保持距離指令發出提醒保持距離語音。

在本發明中，優選的，所述攝像模塊還包括手部姿勢估計單元，所述手部姿勢估計單元包括若干個預設的手勢，且每個預設的手勢對應一個手勢指令，所述手部姿勢估計單元用以識別駕駛人員的手勢對應的預設的手勢，并調取對應的手勢指令，通過手勢指令來控制所述揚聲器單元進行播放操作，所述播放操作包括有，增大播放音量、減小播放音量、播放上一首歌曲、播放下一首歌曲或視頻播放進度。