[發明專利]基于眼部識別的交互方法、裝置、電子設備以及存儲介質

在審

• 申請號: 202211634960.4
• 申請日: 2022-12-19
• 公開（公告）號: CN115953825A
• 公開（公告）日: 2023-04-11
• 發明（設計）人: 金勇
• 申請（專利權）人: 深圳康佳電子科技有限公司
• 主分類號: G06V40/18
• 分類號: G06V40/18;G06F3/0481;G06F3/0484;G06T7/246
• 代理公司: 北京國貝知識產權代理有限公司 11698
• 代理人: 張琦

本公開提供一種基于眼部識別的交互方法、裝置、電子設備以及存儲介質，該方法包括：采集用戶視覺焦點的移動軌跡；基于移動軌跡的起點位置和終點位置確定待執行的預定操作；在接收到用戶的確認操作的情況下，執行預定操作。本公開充分利用目前攝像設備對人眼動作的狀態捕捉能力，通過識別用戶視覺焦點的移動軌跡來確定用戶希望進行的操作，并在檢測到確認動作之后進行相應操作的執行，使用戶對設備顯示畫面的控制脫離額外設備，并且可以快速高效地進行。

技術領域

本發明涉及設備控制領域，尤其涉及一種基于眼部識別的交互方法、裝置、電子設備以及存儲介質。

背景技術

隨著越來越多的顯示類電子產品，特別是大屏幕電視、VR眼鏡、頭戴式顯示設備的出現，其人機交互界面的有效實現是一個重要的研究方向。目前常用的用戶與顯示類電子設備之間的交互方式依舊為利用額外的硬件設備(包括但不限于遙控器、操作按鈕或用戶持有的智能手機等)進行，或者利用顯示類產品內置的語音助手，通過用戶發出語音指令進行交互控制，上述常規的交互控制方式對于用戶來說操作起來較為繁瑣，需要額外的設備或較長的交互時間進行。

發明內容

根據本公開的一方面，提供了一種基于眼部識別的交互方法，包括：采集用戶視覺焦點的移動軌跡；基于所述移動軌跡的起點位置和終點位置確定待執行的預定操作；在接收到所述用戶的確認操作的情況下，執行所述預定操作。

在一些實施例中，用戶的可視區域包括多個視覺區域，所述基于所述移動軌跡的起點位置和終點位置確定待執行的預定操作，包括：在所述起點位置和所述終點位置位于同一個視覺區域中的情況下，所述預定操作為延所述起點位置指向所述終點位置的方向移動顯示內容；在所述起點位置和所述終點位置位于不同視覺區域中的情況下，所述預定操作為將所述終點位置所在的第二視覺區域內的顯示內容移動至所述起點位置所在的第一視覺區域中。

在一些實施例中，所述確認操作至少包括：所述視覺焦點在任意一個位置的聚焦時長超過第一閾值；和/或，所述用戶連續進行眨眼動作的次數超過第二閾值。

在一些實施例中，在采集用戶視覺焦點的移動軌跡之前，還包括：在所述用戶的可視區域內依次突出顯示各個校準點；檢測用戶對各個所述校準點的聚焦時長是否均超過第三閾值；在所述用戶對各個所述校準點的聚焦時長均超過所述第三閾值的情況下，確定所述校準點的校準成功，否則，確定所述校準點的校準失敗。

根據本公開的另一方面，提供了一種基于眼部識別的交互裝置，包括：采集模塊，用于采集用戶視覺焦點的移動軌跡；確定模塊，用于基于所述移動軌跡的起點位置和終點位置確定待執行的預定操作；交互模塊，用于在接收到所述用戶的確認操作的情況下，執行所述預定操作。

在一些實施例中，用戶的可視區域包括多個視覺區域，所述確定模塊具體用于：在所述起點位置和所述終點位置位于同一個視覺區域中的情況下，所述預定操作為延所述起點位置指向所述終點位置的方向移動顯示內容；在所述起點位置和所述終點位置位于不同視覺區域中的情況下，所述預定操作為將所述終點位置所在的第二視覺區域內的顯示內容移動至所述起點位置所在的第一視覺區域中。

在一些實施例中，所述確認操作至少包括：所述視覺焦點在任意一個位置的聚焦時長超過第一閾值；和/或，所述用戶連續進行眨眼動作的次數超過第二閾值。

在一些實施例中，還包括：校準模塊，用于在所述用戶的可視區域內依次突出顯示各個校準點；檢測用戶對各個所述校準點的聚焦時長是否均超過第三閾值；在所述用戶對各個所述校準點的聚焦時長均超過所述第三閾值的情況下，確定所述校準點的校準成功，否則，確定所述校準點的校準失敗。

根據本公開的另一方面，提供了一種電子設備，包括：處理器；以及存儲程序的存儲器，其中，所述程序包括指令，所述指令在由所述處理器執行時使所述處理器執行上述的方法。

根據本公開的另一方面，提供了一種存儲有計算機指令的非瞬時計算機可讀存儲介質，其中，所述計算機指令用于使所述計算機執行上述的方法。