[發(fā)明專利]在媒體中使用參考幀的注視檢測器

有效

• 申請?zhí)枺?/td>: 201480080262.1
• 申請日: 2014-04-29
• 公開（公告）號: CN106662911B
• 公開（公告）日: 2020-08-11
• 發(fā)明（設計）人: H·S·默克爾
• 申請（專利權）人: 惠普發(fā)展公司;有限責任合伙企業(yè)
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 中國專利代理(香港)有限公司 72001
• 代理人: 張凌苗;陳嵐

示例涉及使用媒體中的參考幀的注視檢測器。一個示例包括在呈現(xiàn)在顯示器上的媒體幀之間以第一頻率插入?yún)⒖紟?、分析參考幀的反射的圖像以及基于來自用戶的參考幀的反射來確定用戶正在觀看的媒體的一部分。

背景技術

在許多情況下，用戶使用由他們的手、手指等控制的輸入設備(例如，鼠標、鍵盤、軌跡球、觸摸屏等)來控制電子設備(例如，計算機、平板計算機、膝上型計算機、移動電話等)。在一些示例中，眼睛跟蹤系統(tǒng)可以用于控制電子設備。在這樣的示例中，電子設備可以包括或利用確定用戶的注視方向的注視檢測系統(tǒng)。

附圖說明

圖1是包括根據(jù)本公開的教導構造的示例注視檢測器的注視檢測系統(tǒng)的示意圖。

圖2示出了根據(jù)本公開的教導的向示例注視檢測器提供信息的三個事件，其可由圖1的注視檢測器實現(xiàn)，以確定注視方向和/或用戶正在觀看的媒體的一部分。

圖3是可用于實現(xiàn)圖1的注視檢測器的示例注視檢測器的框圖。

圖4A-圖4B示出了可由圖1和/或圖3的注視檢測器使用的示例參考幀。

圖5是可由圖1和/或圖3的注視檢測器實現(xiàn)的示例參考幀管理器的框圖。

圖6示出了可以是由圖1和/或圖3的注視檢測器使用的候選參考幀的媒體幀的示例。

圖7是可由圖1和/或圖3的注視檢測器實現(xiàn)的示例圖像管理器的框圖。

圖8是可由圖1和/或圖3的注視檢測器實現(xiàn)的示例注視分析器的框圖。

圖9A-圖9C示出了可由圖1和/或圖3的注視檢測器分析的用戶的(一個或多個)眼睛的示例圖像。

圖10示出了用戶正在觀看可由圖1和/或圖3的注視檢測器使用的三個示例顯示幀。

圖11A-圖11C示出了可由圖1和/或圖3的注視檢測器使用的示例用戶頭部位置和相應的參考幀。

圖12是表示可執(zhí)行以實現(xiàn)圖1和/或圖3的注視檢測器和/或圖5、圖7和/或圖8的注視檢測器的元素的示例機器可讀指令的流程圖。

圖13是表示可執(zhí)行以實現(xiàn)圖1和/或圖3的注視檢測器和/或圖5、圖7和/或圖8的注視檢測器元素的示例機器可讀指令的另一流程圖。

圖14是能夠執(zhí)行圖12和/或圖13的指令以實現(xiàn)圖1和/或圖3的注視檢測器110和/或圖5、圖7和/或圖8的注視檢測器元素的處理器平臺的框圖。

具體實施方式

示例眼睛跟蹤系統(tǒng)和/或注視檢測系統(tǒng)可以在相對于照相機的已知位置處、也可以在(例如設備的遠程系統(tǒng)上和/或在頭戴式裝置上的)固定的已知位置處提供固定照明點(例如，紅外發(fā)光二極管(LED))。在這樣的示例中，照相機圖像檢測用戶眼睛中的照明點的反射并且基于該照明點和/或照相機的已知位置進行計算以確定注視方向。

在本文公開的示例中，提供了一種注視檢測器，該注視檢測器能夠通過呈現(xiàn)在呈現(xiàn)設備上的參考幀來動態(tài)使用照明點。因此，本文公開的示例允許根據(jù)本公開的教導構造的注視檢測器基于用戶的環(huán)境和/或頭部位置來調(diào)整照明點，以確定用戶的注視方向。本文公開的示例涉及利用正在呈現(xiàn)媒體的呈現(xiàn)設備來在呈現(xiàn)設備上呈現(xiàn)的媒體幀之間插入的參考幀上呈現(xiàn)照明點。

示例裝置包括參考幀管理器、圖像管理器和注視分析器，以確定注視方向和/或用戶正在觀看的媒體的一部分。在本文公開的示例中，參考幀管理器在媒體的媒體幀之間以某頻率將參考幀插入到媒體中，并且圖像管理器標識由照相機捕獲的圖像，該圖像包括來自用戶的參考幀的反射。此外，在本文公開的示例中，注視分析器基于反射的圖像確定注視方向和/或用戶正在觀看的媒體的一部分。