[發明專利]基于眼球追蹤的模擬飛行操作測試輔助系統及方法

有效

• 申請號: 201611098206.8
• 申請日: 2016-12-03
• 公開（公告）號: CN106814849B
• 公開（公告）日: 2020-08-14
• 發明（設計）人: 尹曉雪;張捷;單瑚
• 申請（專利權）人: 中信海洋直升機股份有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 北京權智天下知識產權代理事務所(普通合伙) 11638
• 代理人: 王新愛

本發明涉及一種基于視線的心理輔助分析系統及方法。該方法包括：進入某一模擬飛行操作模式，向測試設備發送測試指令；接收測試設備發送的第二瞳孔圖像；對第二瞳孔圖像進行處理形成第二視線軌跡；從本地調取對應模擬飛行操作模式下的第一視線軌跡；對比第一視線軌跡與第二視線軌跡形成測試輔助數據。本發明實施例，將合格的飛行員在某一駕駛模式或者特定場景下的視線軌跡通過大數據分析的方式形成標準化的視線軌跡范圍，與被測試的飛行學員的視線軌跡進行比對，將重合度作為考核飛行學員的指標之一，能夠輔助模擬飛行的測試，提高測試效果。

技術領域

本發明屬于眼球追蹤技術領域，具體涉及一種基于眼球追蹤的模擬飛行操作測試輔助系統及方法。

背景技術

模擬飛行是依托計算機硬件和軟件技術，應用互聯網、局域網環境，進行近似于真實的真飛機(如波音737等)的仿真飛行操作技術的運動。高度仿真和互動性強是模擬飛行最顯著的特點，模擬飛行通常運用于民用或軍用飛行員的地面飛行訓練。

飛行模擬器或飛行模擬機，又稱為模擬駕駛艙，是一種盡可能真實地再現或模擬航空器駕駛感覺的系統。飛行模擬器包含了從電子游戲，到由液壓或電動機驅動，并由最先進的電腦技術所控制的同比例模擬駕駛艙。飛行模擬器已廣泛地運用于由航空工業設計和研發，以及為民用和軍用飛機做飛行員與機組成員培訓。

然后，對于飛行員來說，在實際駕駛飛行器前，必須經過嚴格的訓練，在保證安全駕駛的前提下，還需要能夠應對各種復雜環境和模式下的應急處理。因此，需要設計一種測試系統和測試方法來確定飛行員的駕駛操作是否合格。

發明內容

為了解決現有技術中存在的上述問題，本發明提供了一種基于眼球追蹤的模擬飛行操作測試輔助系統及方法。

本發明的一個實施例提供了一種基于眼球追蹤的模擬飛行操作測試輔助系統，包括：用于飛行學員進行飛行控制的模擬飛行器和攜帶于所述飛行學員頭部的測試設備，所述測試設備包括通信模塊和眼部圖像采集模塊；其中，

在啟動某一模擬飛行操作模式時，所述模擬飛行器向所述測試設備發送測試指令，所述測試設備通過所述通信模塊接收所述測試指令并將所述測試指令發送至所述眼部圖像采集模塊，由所述眼部圖像采集模塊采集當前所述飛行學員的第二瞳孔圖像并將所述第二瞳孔圖像通過所述通信模塊回傳至所述模擬飛行器，由所述模擬飛行器的處理器對所述第二瞳孔圖像進行處理形成第二視線軌跡，并將所述第二視線軌跡與預先存儲的第一視線軌跡進行對比形成測試輔助數據。

在本發明的一個實施例中，所述眼部圖像采集模塊采集當前所述飛行學員的第二瞳孔圖像，包括：

所述眼部圖像采集模塊根據所述測試指令調用對應的圖像采集模式，并按照所述圖像采集模式設置的時間點控制所述眼部圖像采集模塊對所述飛行學員的眼部進行圖像采集形成所述第二瞳孔圖像；或者

所述眼部圖像采集模塊根據所述測試指令實時對所述飛行學員的眼部進行圖像采集形成所述第二瞳孔圖像，所述測試指令是在對應模擬飛行操作模式下按照設定時間點發送的多個圖像采集控制指令。

在本發明的一個實施例中，所述模擬飛行器的處理器對所述第二瞳孔圖像進行處理形成第二視線軌跡，包括：

所述處理器根據所述第二瞳孔圖像確定第二瞳孔的邊緣位置，并由所述邊緣位置確定所述第二瞳孔的中心點位置；

所述處理器按照所述測試指令在對應模擬飛行操作模式下按照設定時間點將多個所述第二瞳孔的中心點擬合形成所述第二視線軌跡。

在本發明的一個實施例中，所述處理器根據所述第二瞳孔圖像確定第二瞳孔的邊緣位置，包括：

所述處理器將所述第二瞳孔圖像進行灰度化處理形成第二灰度圖像；

所述處理器在所述第二灰度圖像上估算所述第二瞳孔的中心點位置以形成初始中心點；