[發明專利]視線跟蹤人機交互方法及裝置

無效

• 申請號: 200710099511.3
• 申請日: 2007-05-23
• 公開（公告）號: CN101311882A
• 公開（公告）日: 2008-11-26
• 發明（設計）人: 左坤隆
• 申請（專利權）人: 華為技術有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06K9/00
• 代理公司: 北京同立鈞成知識產權代理有限公司
• 代理人: 劉芳

1、一種視線跟蹤人機交互方法，其特征在于，包括：

采集視線跟蹤信息，并根據所述視線跟蹤信息獲取視線焦點位置；

采集面部圖像信息，并根據所述面部圖像信息識別出面部動作；

根據所述視線焦點位置輸出與所述面部動作對應的控制指令。

2、根據權利要求1所述的方法，其特征在于，所述面部動作包括預設開關動作，所述方法具體包括：

采集面部圖像信息，根據所述面部圖像信息首次識別出所述預設開關動作或識別出所述預設開關動作的次數為奇數后，執行以下步驟：

采集視線跟蹤信息，并根據所述視線跟蹤信息獲取視線焦點位置；

采集面部圖像信息，并根據所述面部圖像信息識別出面部動作；

根據所述視線焦點位置輸出與所述面部動作對應的控制指令。

3、根據權利要求1或2所述的方法，其特征在于，在識別出面部動作之后，根據所述視線焦點位置輸出與所述面部動作對應的控制指令之前還包括：

確認識別到面部動作非預設開關動作。

4、根據權利要求1或2所述的方法，其特征在于，在采集視線跟蹤信息之后識別出面部動作之前還包括：

確認視線跟蹤信息中的視線在預設視線位置范圍內。

5、根據權利要求4所述的方法，其特征在于，在確認視線跟蹤信息中的視線在預設視線位置范圍內之后，識別出面部動作之前還包括：

確認面部圖像信息中的面部轉角在預設面部轉角范圍內。

6、根據權利要求1或2所述的方法，其特征在于，在識別出面部動作之后，根據所述視線焦點位置輸出與所述面部動作對應的控制指令之前還包括：

確認所述面部動作為預設面部動作且非預設開關動作。

7、根據權利要求1或2所述的方法，其特征在于，還包括：更新面部動作與控制指令的映射關系。

8、一種視線跟蹤人機交互裝置，其特征在于，包括：

視線跟蹤處理單元，用于進行視線跟蹤操作，所述視線跟蹤操作包括采集視線跟蹤信息并根據所述視線跟蹤信息獲取視線焦點位置；

面部動作識別單元，用于采集面部圖像信息并根據所述面部圖像信息識別出面部動作；以及

控制指令輸出單元，與所述視線跟蹤處理單元及所述面部動作識別單元分別連接，用于根據所述視線焦點位置輸出與所述面部動作對應的控制指令。

9、根據權利要求8所述的裝置，其特征在于，所述面部動作識別單元與所述視線跟蹤處理單元連接，當檢測到所述面部動作為預設開關動作時，用于通知視線跟蹤處理單元，相應地啟動或停止視線跟蹤操作。

10、根據權利要求8所述的裝置，其特征在于，還包括同步處理模塊，所述視線跟蹤處理單元通過所述同步處理模塊與所述面部動作識別單元連接，當檢測所述視線跟蹤信息中的視線在預設視線位置范圍內時，用于通過所述同步處理模塊通知面部動作識別單元，根據當前面部圖像信息識別出當前面部動作。

11、根據權利要求9所述的裝置，其特征在于，所述面部動作識別單元通過所述同步處理模塊與所述視線跟蹤處理單元連接，當檢測所述面部圖像信息中的面部轉角在預設面部轉角范圍外時，用于通過所述同步處理模塊通知視線跟蹤處理單元，檢測所述視線跟蹤信息中的視線是否在預設視線位置范圍內。

12、根據權利要求8-11所述的任一裝置，其特征在于，還包括：更新模塊，與所述控制指令輸出單元連接，用于更新所述控制指令輸出單元中的面部動作與控制指令的映射關系。

13、根據權利要求8-11所述的任一裝置，其特征在于，所述視線跟蹤處理單元包括：

視線跟蹤采集模塊，用于采集視線跟蹤信息；以及

視線跟蹤處理模塊，與所述視線跟蹤采集模塊連接，用于根據視線跟蹤信息獲取視線焦點位置。

14、根據權利要求8-11所述的任一裝置，其特征在于，所述面部動作識別單元包括：

面部圖像采集模塊，用于采集面部圖像信息；以及

面部動作識別模塊，與所述面部圖像采集模塊連接，用于根據面部圖像信息識別出面部動作。