[發明專利]注視方向映射

有效

• 申請號: 201680059091.3
• 申請日: 2016-08-05
• 公開（公告）號: CN108351522B
• 公開（公告）日: 2021-02-05
• 發明（設計）人: 安德烈·阿爾戈特松;安德斯·克勞森;杰斯珀·霍斯特羅姆;喬納斯·霍斯特羅姆;托拜厄斯·林格倫;拉斯馬斯·彼得松;馬田·斯科郭;威爾基·王
• 申請（專利權）人: 托比股份公司
• 主分類號: G02B27/01
• 分類號: G02B27/01;G06F3/00;G06F3/01;G06F3/0481;G06F16/432
• 代理公司: 廣州華進聯合專利商標代理有限公司 44224
• 代理人: 何沖;黃隸凡

公開了一種用于確定注視方向和可穿戴設備周圍環境之間的對應性的方法。該可穿戴設備可以包括眼球追蹤裝置和面朝外圖像傳感器。該方法可以包括接收輸入參數和來自該面朝外圖像傳感器的至少一個場景圖像。該方法可以進一步包括至少利用所述眼球追蹤裝置，確定可穿戴設備的穿戴者在一時間點的至少一個注視方向，該時間點對應于該場景圖像被面朝外圖像傳感器捕獲的時刻。該方法額外可以包括至少部分基于該輸入參數來確定特定場景圖像包括預定義圖像的至少一部分。此外該方法可以包括基于所述至少一個注視方向來確定在所述特定場景圖像上的至少一個注視點。

相關申請的交叉引用

本申請主張于2015年11月30日提交的、申請號為14/954,026的美國臨時專利申請的優先權，該美國臨時專利申請主張于2015年8月7日提交的、申請號為62/202,582的美國臨時專利申請的優先權，二者的名稱均為“注視方向映射”(GAZE DIRECTION MAPPING)，此處用于所有目的而通過引用將二者的整個公開內容并入到本文，等同于在本文中完整地敘述。

背景技術

本發明的實施例大致涉及用于將至少一人的注視方向映射到這個人周圍的環境上的系統和方法，具體地，涉及結合了可穿戴設備來使用計算機視覺方法的系統和方法，該可穿戴設備至少使用來自與該可穿戴設備連接的場景攝像機的信息。

發明內容

在一個實施例中，提供了一種用于確定在注視方向與可穿戴設備周圍環境之間的對應的方法。該可穿戴設備可以包括眼球追蹤裝置和面朝外圖像傳感器。該方法可以包括接收輸入參數。該方法還可以包括接收來自該面朝外圖像傳感器的至少一個場景圖像。該方法可以進一步包括至少利用所述眼球追蹤裝置，確定可穿戴設備的穿戴者在一時間點的至少一個注視方向，該時間點對應于該場景圖像被面朝外圖像傳感器捕獲的時刻。該方法額外可以包括至少部分基于該輸入參數來確定特定場景圖像包括預定義圖像的至少一部分。此外該方法可以包括基于所述至少一個注視方向來確定在所述特定場景圖像上的至少一個注視點。

在另一個實施例中，提供了一種用于確定在注視方向與可穿戴設備周圍環境之間的對應的不同方法。該可穿戴設備可以包括眼球追蹤裝置和面朝外圖像傳感器。該方法可以包括接收來自該面朝外圖像傳感器的至少一個場景圖像。該方法還可以包括至少利用所述眼球追蹤裝置來確定可穿戴設備的穿戴者在一時間點的至少一個注視方向，該時間點對應于該場景圖像被面朝外圖像傳感器捕獲的時刻。該方法可以進一步包括至少基于輸入參數來確定特定場景圖像包括預定義圖像的至少一部分。該方法可以額外包括基于至少一個注視方向來確定在該特定場景圖像上的至少一個注視點。此外該方法可以又包括使該場景圖像帶有覆蓋視覺指示地被顯示，其中該覆蓋視覺指示對應于該預定義圖像的至少一部分。該方法可以再又包括接收關于所述覆蓋視覺指示的調整的用戶反饋。該方法可以還包括至少部分基于所述用戶反饋，調整所述輸入參數。該方法可以進一步包括至少基于該輸入參數來確定未來場景圖像包括預定義圖像的至少一部分。

在另一個實施例中，提供了一種用于確定在注視方向與可穿戴設備周圍環境之間的對應的方法。該可穿戴設備可以包括眼球追蹤裝置和面朝外圖像傳感器。該方法可以包括接收來自該面朝外圖像傳感器的至少一個場景圖像。該方法還可以包括至少利用所述眼球追蹤裝置來確定可穿戴設備的穿戴者在一時間點的至少一個注視方向，該時間點對應于該場景圖像被面朝外圖像傳感器捕獲的時刻。該方法可以進一步包括至少部分基于輸入參數來確定特定場景圖像包括預定義圖像的至少一部分。該方法可以額外包括基于至少一個注視方向來確定在該特定場景圖像上的至少一個注視點。此外該方法可以又包括確定置信值，該置信值為至少一個注視點與預定義圖像相關可能性程度的表征。