[發明專利]視線檢測系統、偏移檢測方法、偏移檢測程序

在審

• 申請號: 201710623538.1
• 申請日: 2017-07-27
• 公開（公告）號: CN107665040A
• 公開（公告）日: 2018-02-06
• 發明（設計）人: 趙柱安;洛克拉因·威爾遜
• 申請（專利權）人: FOVE股份有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 北京同達信恒知識產權代理有限公司11291
• 代理人: 黃志華,洪秀川

技術領域

本發明涉及視線檢測系統，特別涉及利用頭戴式顯示器的視線檢測技術。

背景技術

以往，在進行用于確認用戶凝視位置的視線檢測時，事先進行校準，并預先取得用戶的視線的基本信息。在專利文獻1公開了一種進行校準后進行視線檢測的技術。

近年來，用戶裝戴到頭部使用的頭戴式顯示器或眼鏡顯示器等也在嘗試進行視線檢測。這種情況也是在進行上述校準之后進行視線檢測。

現有技術文獻

專利文獻

專利文獻1：日本特開2001－134371號公報

然而，前提是用戶與頭戴式顯示器或眼鏡顯示器之間的相對位置關系保持不變。因此，例如在使用頭戴式顯示器過程中發生如圖13所示的物理偏移的情況下，存在視線檢測的檢測位置精度下降的問題。因此，檢測頭戴式顯示器被用戶裝戴的狀態的偏移對發現視線檢測的精度下降來講是一項非常重要的課題。在圖13所示的例子中示出了裝戴到用戶的頭部的頭戴式顯示器100從虛線150t1的狀態向實線150t2所示的狀態偏移的情況。這只不過是其中一種偏移例子，還包括向下發生偏移、單側向上下發生偏移的情況，不管發生哪一種偏移，都存在視線檢測的檢測位置精度下降的問題。因此，期待開發出檢測這種偏移的方法。

發明內容

本發明是鑒于上述問題而提出的，其目的在于，提供一種在頭戴式顯示器等用戶裝戴到頭部使用的裝戴件發生偏移等的情況下能夠檢測這種偏移的視線檢測系統。

為了解決上述技術問題，根據本發明的一實施方式，提供一種視線檢測系統，包括用戶裝戴使用的裝戴件，其包括：多個發射部，向用戶的眼睛發射不可見光；攝像頭，根據不可見光來拍攝用戶的眼睛；瞳孔確認部，從攝像頭拍攝得到的拍攝圖像中確認用戶的瞳孔中心；取得部，根據多個發射部的配置位置、從多個發射部向用戶的眼睛發射的發射光的發射位置以及攝像頭的配置位置，來取得與用戶的眼角膜曲率的中心位置有關的信息；向量確認部，確認將拍攝圖像中的用戶的眼角膜曲率中心和瞳孔中心連結起來的向量；偏移檢測部，根據向量來對用戶裝戴的裝戴件的裝戴狀態的偏移進行檢測。

在上述視線檢測系統中，視線檢測系統還可包括用于對表示多個發射部與攝像頭的配置位置的配置信息進行存儲的存儲部，取得部可根據存儲在存儲部中的多個發射部之中的第一發射部的配置信息、從第一發射部發射的不可見光相對于用戶的眼睛的第一發射位置、存儲在存儲部中的多個發射部之中的與第一發射部不同的第二發射部的配置信息、從第二發射部發射的不可見光相對于用戶的眼睛的第二發射位置以及攝像頭的配置位置，來取得與用戶的眼角膜曲率的中心位置有關的信息。

在上述視線檢測系統中，取得部可取得包括從攝像頭的中心位置朝向第一發射部的第一向量和從攝像頭的中心位置朝向第一發射位置的第二向量的第一平面以及包括從攝像頭的中心位置朝向第二發射部的第三向量和從攝像頭的中心位置朝向第二發射位置的第四向量的第二平面之間的交線作為與用戶的眼角膜曲率的中心位置有關的信息。

在上述視線檢測系統中，向量確認部將交線與攝像頭的圖像傳感器之間的交點作為拍攝圖像中的用戶的眼角膜曲率的中心來確認向量。

在上述視線檢測系統中，在第一時刻由向量確認部確認的作為向量的第一向量的位置和在第一時刻開始規定時間內的第二時刻由向量確認部確認的作為向量的第二向量的位置處于不同位置的情況下，偏移檢測部可檢測出偏移。

在上述視線檢測系統中，裝戴件可為頭戴式顯示器，

視線檢測系統還可包括視線檢測裝置，裝戴件可包括發射部、攝像頭以及用于將拍攝圖像發送給視線檢測裝置的發送部，視線檢測裝置可包括用于接收拍攝圖像的接收部、瞳孔確認部、取得部、向量確認部以及偏移檢測部。

在上述視線檢測系統中，裝戴件還可包括用于向用戶提示圖像的顯示部，視線檢測裝置還可包括根據拍攝圖像來檢測出凝視圖像的用戶的凝視位置的視線檢測部。

在上述視線檢測系統中，視線檢測裝置還可包括校正部，校正部根據偏移檢測部檢測出的偏移，來校正視線檢測部檢測出的用戶的凝視位置。