[發明專利]基于車載HUD的眼動輔助語音交互方法及系統

在審

• 申請號: 201710430194.2
• 申請日: 2017-06-09
• 公開（公告）號: CN107310476A
• 公開（公告）日: 2017-11-03
• 發明（設計）人: 付翔;賀子宸;劉道遠;王靜;邢愛娟;劉會康
• 申請（專利權）人: 武漢理工大學
• 主分類號: B60R1/00
• 分類號: B60R1/00;B60R16/023;G02B27/01;G06F3/01;G10L15/22;G10L15/26
• 代理公司: 湖北武漢永嘉專利代理有限公司42102
• 代理人: 王丹

技術領域

本發明屬于車載人際交互系統，具體涉及一種基于車載HUD的眼動輔助語音交互方法及系統。

背景技術

隨著現代汽車工業的不斷發展，人們對汽車舒適性和操作便利性的要求越來越高。大量的電子設備在汽車中的應用，極大地提升了車輛的舒適性。電子設備的增加，也意味著汽車的儀表板上會有更多的按鍵，用于控制音響、空調、GPS、定速巡航、導航等。同時，汽車的顯示屏也越來也大，在播放多媒體圖像視頻的同時，越來越多地顯示車輛信息。如此多的功能需要不同的按鍵分別進行操作，使得用戶進行操作時不方便。

發明內容

本發明要解決的技術問題是：提供一種基于車載HUD的眼動輔助語音交互方法及系統，交互過程中手部無需離開方向盤，視線無需離開行駛道路視野，避免駕駛員關注按鍵操作帶來的事故風險。

本發明為解決上述技術問題所采取的技術方案為：一種基于車載HUD的眼動輔助語音交互方法，其特征在于：它包括以下步驟：

初始狀態：HUD處于關閉狀態；

車載語音識別系統將通過麥克風獲取的HUD打開指令語音，轉換為HUD打開指令；

HUD在接收到車載語音識別系統的HUD打開指令后啟動，將HUD界面功能區投影到前擋風玻璃上；校正眼動追蹤系統；

當眼動追蹤系統識別出駕駛員的視線進入HUD界面功能區，且在一定時間內車載語音識別系統將通過麥克風獲取語音控制指令，則按照語音控制指令對應的內容執行相應的操作；否則關閉HUD，返回初始化狀態。

按上述方法，所述的HUD界面功能區包括若干圖標；

當HUD在關閉狀態時，圖標最小化在HUD界面功能區邊緣，HUD界面功能區透明度高；

當HUD在打開狀態下，圖標展開在HUD界面功能區中，HUD界面功能區透明度低，當駕駛員視線進入HUD界面功能區，被視線注釋的圖標尺寸變大，其它圖標尺寸變小。

按上述方法，所述的一定時間設定為3-6秒。

按上述方法，本方法中預設激活指令，當通過麥克風獲取的語音與預設激活指令相匹配時，才進行啟動。

按上述方法，所述的語音控制指令為預設控制語音，預設控制語音與對應的操作建立有映射關系；當通過麥克風獲取的語音與預設控制語音相匹配時，才按照所述映射關系進行相應的操作。

一種用于述的基于車載HUD的眼動輔助語音交互方法的系統，其特征在于：它包括設置在車輛儀表盤上方、正對駕駛員眼睛的眼動追蹤器，投影發射面面向前擋風玻璃的HUD，設置在駕駛室控制面板上的麥克風，以及設置在駕駛室內的語音識別系統和主機處理器；其中麥克風與所述的語音識別系統連接，語音識別系統、眼動追蹤器和HUD分別與主機處理器連接，主機處理器與各車載設備的控制模塊通過CAN總線連接。

按上述系統，本系統還包括車載信息采集裝置，車載信息采集裝置通過CAN總線與各車載設備連接獲取車輛實時數據，并與所述主機處理器連接，主機處理器將車輛實時數據通過HUD顯示在HUD界面功能區。

本發明的有益效果為：通過采集駕駛員眼球動作基于HUD和語音輔助對車輛進行控制，交互過程中手部無需離開方向盤，視線無需離開行駛道路視野，避免駕駛員關注按鍵操作帶來的事故風險。

附圖說明

圖1為本發明一實施例的方法流程圖。

圖2為本發明一實施例的使用場景模擬圖。

圖中：1-視線，2-眼動追蹤器，3-HUD界面功能區，4-麥克風。

具體實施方式

下面結合具體實例和附圖對本發明做進一步說明。

本發明提供一種基于車載HUD的眼動輔助語音交互方法，包括以下步驟：

初始狀態：HUD處于關閉狀態；

車載語音識別系統將通過麥克風獲取的HUD打開指令語音，轉換為HUD打開指令；

HUD在接收到車載語音識別系統的HUD打開指令后啟動，將HUD界面功能區投影到前擋風玻璃上；校正眼動追蹤系統；

當眼動追蹤系統識別出駕駛員的視線進入HUD界面功能區，且在一定時間（3-6秒）內車載語音識別系統將通過麥克風獲取語音控制指令，則按照語音控制指令對應的內容執行相應的操作；否則關閉HUD，返回初始化狀態。