[發(fā)明專(zhuān)利]注視方向映射

有效

• 申請(qǐng)?zhí)枺?/td>: 202110079634.0
• 申請(qǐng)日: 2016-08-05
• 公開(kāi)（公告）號(hào): CN112666714B
• 公開(kāi)（公告）日: 2023-03-24
• 發(fā)明（設(shè)計(jì)）人: 安德烈·阿爾戈特松;安德斯·克勞森;杰斯珀·霍斯特羅姆;喬納斯·霍斯特羅姆;托拜厄斯·林格倫;拉斯馬斯·彼得松;馬田·斯科郭;威爾基·王
• 申請(qǐng)（專(zhuān)利權(quán)）人: 托比股份公司
• 主分類(lèi)號(hào): G02B27/01
• 分類(lèi)號(hào): G02B27/01;G06F3/00;G06F3/01;G06F3/0481;G06F16/432
• 代理公司: 上海脫穎律師事務(wù)所 31259
• 代理人: 脫穎

1.一種用于確定注視方向與可穿戴設(shè)備周?chē)h(huán)境之間的對(duì)應(yīng)的方法，其中所述可穿戴設(shè)備包括眼球追蹤裝置和面朝外圖像傳感器，且其中所述方法包括：

接收來(lái)自所述面朝外圖像傳感器的至少一個(gè)場(chǎng)景圖像；

至少利用所述眼球追蹤裝置，確定所述可穿戴設(shè)備的穿戴者在一時(shí)間點(diǎn)的至少一個(gè)注視方向，所述時(shí)間點(diǎn)對(duì)應(yīng)于所述場(chǎng)景圖像被所述面朝外圖像傳感器捕獲的時(shí)刻；

確定特定場(chǎng)景圖像包括預(yù)定義圖像的至少一部分；

基于所述至少一個(gè)注視方向，確定在所述特定場(chǎng)景圖像上的至少一個(gè)注視點(diǎn)；

為所述至少一個(gè)注視點(diǎn)確定置信值，所述置信值表征所述至少一個(gè)注視點(diǎn)與所述預(yù)定義圖像相關(guān)的概率；

基于所述置信值和所述至少一個(gè)注視點(diǎn)，確定與所述至少一個(gè)注視點(diǎn)相關(guān)聯(lián)的注視區(qū)域；以及

使得所述場(chǎng)景圖像帶有所述注視區(qū)域的覆蓋視覺(jué)指示地被顯示，其中所述覆蓋視覺(jué)指示對(duì)應(yīng)于所述預(yù)定義圖像的至少一部分。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

為所述至少一個(gè)注視點(diǎn)確定質(zhì)量值，所述質(zhì)量值表征所述特定場(chǎng)景圖像上的所述至少一個(gè)注視點(diǎn)的誤差度，其中確定與所述至少一個(gè)注視點(diǎn)相關(guān)聯(lián)的注視區(qū)域是進(jìn)一步基于所述質(zhì)量值的。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述方法還包括：

比較所述置信值和所述質(zhì)量值，其中確定所述注視區(qū)域進(jìn)一步基于以下：基于對(duì)所述置信值和所述質(zhì)量值的比較，確定所述置信值高而所述質(zhì)量值低。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述置信值是基于所述預(yù)定義圖像中的局部區(qū)域與所述場(chǎng)景圖像之間的相似度的比較而確定的。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

確定在另一時(shí)間點(diǎn)的另一注視方向，所述另一時(shí)間點(diǎn)對(duì)應(yīng)于另一場(chǎng)景圖像被所述面朝外圖像傳感器捕獲的時(shí)刻；

確定所述另一場(chǎng)景圖像包括所述預(yù)定義圖像的至少一部分；

基于所述另一注視方向，確定在所述另一場(chǎng)景圖像上的另一注視點(diǎn)；

為所述另一注視點(diǎn)確定另一置信值，以及

基于所述另一置信值，提供所述另一注視方向?qū)⒈皇謩?dòng)地分析的指示。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

基于所述注視點(diǎn)的位置，選擇所述場(chǎng)景圖像的子集，所述場(chǎng)景圖像的子集在所述注視點(diǎn)周?chē)?/p>

基于所述注視點(diǎn)的位置，選擇所述注視點(diǎn)周?chē)乃鲱A(yù)定義圖像的子集，所述預(yù)定義圖像的子集對(duì)應(yīng)于所述場(chǎng)景圖像的子集；以及

比較所述場(chǎng)景圖像的子集和所述預(yù)定義圖像的子集，其中所述置信值是基于比較所述場(chǎng)景圖像的子集與所述預(yù)定義圖像的子集之間的相似度而確定的。

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

接收所述預(yù)定義圖像的3D模型；

基于所述注視點(diǎn)的位置，選擇所述場(chǎng)景圖像的子集，所述場(chǎng)景圖像的子集在所述注視點(diǎn)周?chē)?/p>

基于所述注視點(diǎn)的位置，選擇所述注視點(diǎn)周?chē)乃?D模型的子集，所述3D模型的子集對(duì)應(yīng)于所述場(chǎng)景圖像的子集；以及

比較所述場(chǎng)景圖像的子集和所述3D模型的子集，其中所述置信值是基于比較所述場(chǎng)景圖像的子集和所述3D模型的子集之間的相似度而確定的。

8.根據(jù)權(quán)利要求7所述的方法，其特征在于，所述方法還包括：

確定所述預(yù)定義圖像的第一特征；

確定所述場(chǎng)景圖像的第二特征；

將所述第一特征與所述第二特征進(jìn)行匹配；以及

基于所述第一特征與所述第二特征的匹配來(lái)對(duì)3D點(diǎn)作三角測(cè)量，其中所述預(yù)定義圖像的3D模型是基于三角測(cè)量的3D點(diǎn)所建立的3D模型。