[發明專利]一種人眼瞳孔定位的方法及裝置

有效

• 申請號: 201910561383.2
• 申請日: 2019-06-26
• 公開（公告）號: CN110263745B
• 公開（公告）日: 2021-09-07
• 發明（設計）人: 崔利陽;孫建康;李綱;薛亞沖;楚明磊;陳麗莉;張浩;陳明
• 申請（專利權）人: 京東方科技集團股份有限公司;北京京東方光電科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 北京同達信恒知識產權代理有限公司 11291
• 代理人: 李欣

本申請公開了一種人眼瞳孔定位的方法及裝置，該方法包括：采集用戶在注視屏幕上預設的多個注視點中每個注視點時的人眼圖像，提取所述每個注視點的人眼圖像的瞳孔參數，并根據所述瞳孔參數確定注視點和人眼瞳孔之間的初始映射函數；實時采集用戶在當前注視所述屏幕時的第一人眼圖像，提取所述第一人眼圖像的瞳孔參數；確定出所述預設的多個注視點對應的人眼圖像中與第一人眼圖像對應的瞳孔輪廓向量之間距離最小的第二人眼圖像；基于所述第一人眼圖像、所述第二人眼圖像所對應的瞳孔的中心點修正所述初始映射函數，并基于修正后的映射函數確定用戶當前注視所述屏幕的位置。解決了現有技術中人眼瞳孔定位不準確的技術問題。

技術領域

本申請涉及虛擬現實技術領域，尤其涉及一種人眼瞳孔定位的方法及裝置。

背景技術

隨著虛擬現實(Virtual Reality，VR)技術的迅速發展，VR設備可以通過多維度將文字、視頻或者音頻等傳遞給用戶，提高用戶的體驗感受，受到越來越多的用戶的喜愛。

為了保證用戶在佩戴VR設備時，實現人機交互，需要對人眼的眼球進行追蹤。目前，眼球追蹤技術一般是：通過預設先VR設備顯示屏上標定的多個注視點，然后，通過攝像頭采集用戶注視每個標定注視點時眼部圖像信息，通過眼部圖像信息確定瞳孔中心，根據標定的多個注視點和瞳孔中心，確定注視點和瞳孔之間的映射模型，實時采集用戶當前注視VR設備顯示屏時眼部的圖像信息，然后，確定用戶當前注視VR設備顯示屏時瞳孔中心，根據注視點和瞳孔之間的映射模型，確定出用戶當前注視VR設備顯示屏上的位置。但是，VR設備和人眼之間可能會出現相對的滑動，基于標定的多個注視點確定的映射模型去計算人眼注視顯示屏的位置，導致人眼瞳孔定位不準確，進而影響用戶的體驗感受。

發明內容

本申請提供一種人眼瞳孔定位的方法及裝置，用以解決現有技術中人眼瞳孔定位不準確的技術問題。

第一方面，本申請實施例提供一種人眼瞳孔定位的方法，該方法包括：

采集用戶在注視屏幕上預設的多個注視點中每個注視點時的人眼圖像，提取所述每個注視點的人眼圖像的瞳孔參數，并根據所述瞳孔參數確定注視點和人眼瞳孔之間的初始映射函數，其中，所述瞳孔參數包括瞳孔輪廓向量和瞳孔的中心點；

實時采集用戶在當前注視所述屏幕時的第一人眼圖像，提取所述第一人眼圖像的瞳孔參數；

確定出所述預設的多個注視點對應的人眼圖像中與第一人眼圖像對應的瞳孔輪廓向量之間距離最小的第二人眼圖像；

基于所述第一人眼圖像、所述第二人眼圖像所對應的瞳孔的中心點修正所述初始映射函數，并基于修正后的映射函數確定用戶當前注視所述屏幕的位置。

本申請實施例所提供的方案中，通過采集用戶在注視屏幕上預設的多個注視點中每個注視點時的人眼圖像，并根據提取人眼圖像的瞳孔參數確定注視點和人眼瞳孔之間的初始映射函數，然后，實時采集用戶在當前注視屏時的第一人眼圖像，提取第一人眼圖像的瞳孔參數，并從預設的多個注視點所對應的人眼圖像中確定出與第一人眼圖像的瞳孔參數之間距離最小的第二人眼圖像，基于第一人眼圖像和第二人眼圖像對應的瞳孔的中心點對初始映射函數進行修正，并基于修正后的映射函數確定用戶當前注視所述屏幕的位置。因此，本申請實施例通過實時采集的第一人眼圖像和第二人眼圖像對應的瞳孔的中心點對初始映射函數進行修正，避免無法對映射函數進行修正，導致的人眼瞳孔定位不準確，進而影響用戶的體驗感受。

可選地，根據所述瞳孔參數確定注視點和人眼瞳孔之間的初始映射函數，包括：

基于同一坐標系確定所述每個注視點的坐標，以及確定所述每個注視點的人眼圖像所對應的瞳孔的中心點坐標；

將所述每個注視點的坐標以及所述每個注視點所對應的瞳孔的中心點坐標分別代入預設的擬合函數，得到注視點與人眼瞳孔之間的初始映射函數。