[發明專利]用于預測視覺注意力的目標的設備及方法

有效

• 申請號: 201710412824.3
• 申請日: 2017-06-05
• 公開（公告）號: CN107526431B
• 公開（公告）日: 2020-09-29
• 發明（設計）人: D·A·卡內拉;J·喬;S·A·沃登
• 申請（專利權）人: 通用汽車環球科技運作有限責任公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 中國專利代理(香港)有限公司 72001
• 代理人: 成城;安文森

提供了一種用于跟蹤用戶的凝視的設備。該設備包括：存儲器，其包括計算機可執行指令；以及處理器，其讀取并執行計算機可執行指令。這些指令使處理器：接收與用戶的凝視相關聯的凝視信息；基于凝視信息，確定與用戶的凝視相關聯的改變信息是否大于閾值；以及響應于確定改變信息大于閾值，基于運動學模型來預測用戶的凝視的凝視向量以及用戶的凝視的凝視目標的位置中的至少一者。凝視跟蹤設備可在車輛中用于基于車輛的用戶的凝視來運行車輛功能或更新凝視建模數據庫。

技術領域

本發明涉及用于預測視覺注意力的目標的設備及方法。符合示例性實施例的設備及方法涉及凝視跟蹤及檢測。更具體而言，符合示例性實施例的設備及方法涉及預測用戶的凝視或用戶的視覺注意力的目標。

背景技術

現有技術的凝視方向確定系統在傳感器無法檢測用戶的凝視或其檢測用戶凝視的能力有限的區域通常無法跟蹤用戶的凝視并預測用戶的凝視的目標。為此，存在改進現有的凝視方向確定系統的需要。

發明內容

一個或多個示例性實施例通過提供一種凝視跟蹤設備來解決上面的問題。更具體而言，一個或多個示例性實施例提供一種凝視跟蹤設備，甚至當用戶的凝視指向其中傳感器無法檢測用戶的凝視或其檢測用戶凝視的能力有限的區域時，該凝視跟蹤設備也能夠跟蹤用戶的凝視并更精確地預測用戶的凝視的目標。

根據示例性實施例的一方面，提供了一種用于跟蹤車輛中的用戶的凝視的方法。該方法包括接收與用戶的凝視相關聯的凝視信息；基于該凝視信息，確定與用戶的凝視相關聯的改變信息是否大于閾值；以及響應于確定該改變信息大于閾值，基于運動學模型來預測用戶的凝視的凝視向量以及用戶的凝視的凝視目標的位置中的至少一者。

響應于接收凝視信息的多個樣本來運行確定與用戶的凝視相關聯的改變信息是否大于閾值。

預測凝視向量可包括確定所預測凝視向量是否對應于與功能相關聯的位置；響應于確定所預測凝視向量對應于與功能相關聯的位置，基于歷史使用信息以及車輛環境信息中的至少一者來確定所預測凝視向量對應于與功能相關聯的位置的可能性；以及基于所確定的可能性來執行該功能。

歷史使用信息可包括以下中的至少一者：用戶先前所啟動的功能、從該凝視向量開始在預定閾值內用戶的先前所存儲的凝視向量、用戶對功能進行啟動的次數、用戶先前所定向的位置以及用戶先前已對位置進行定向的次數。

車輛環境信息可包括與以下中的至少一者有關的信息：與車輛相關聯的事件、車輛的轉向、轉向指示器狀態、車輛的速度、車輛的位置、發動機事件或狀態、排放狀態、發動機的每分鐘轉數、變速器狀態、輪胎壓力、門打開/關閉狀態、行李箱打開/關閉狀態、窗口打開/關閉狀態、內部/外部溫度、大氣壓、車輛的加速、用戶輸入、用戶對車輛中的物體或按鈕所施加的壓力、乘客是否處于座椅中、車輛周圍的外部物體的位置及速度、與車輛的哪些燈被激活有關的信息、汽車鑰匙是否存在于車輛中、以及在車輛中的顯示器上當前所顯示的屏幕、車輛的狀態、車輛的設置的狀態、用戶將要察覺的可識別視覺刺激以及可由用戶執行的功能的位置。

預測凝視目標的位置可包括確定所預測位置的坐標是否處于可檢測區域內；響應于確定坐標處于可檢測區域內，計算所預測位置與凝視目標的位置之間的差別并基于所計算差別來更新運動學模型；以及響應于確定坐標處于可檢測區域之外，基于所預測位置來執行功能。

凝視信息可包括用戶的凝視的坐標信息以及用戶的凝視的定時信息。

可基于坐標信息以及定時信息來計算運動學模型。

閾值可以是用戶的凝視是否處于其中用戶的凝視可在特定精確度內跟蹤的區域之外的指示符。

根據另一示例性實施例的一方面，提供了一種包括指令的非暫時性計算機可讀介質，這些指令可由計算機執行以運行用于跟蹤車輛中的用戶的凝視的方法。