[發明專利]確定用戶觸發意圖的方法、設備和存儲器設備

在審

• 申請號: 201810024682.8
• 申請日: 2018-01-10
• 公開（公告）號: CN110018733A
• 公開（公告）日: 2019-07-16
• 發明（設計）人: 張輝;郭天楚;錢德恒;劉夏冰;金暎星;兪炳仁;韓在濬;崔昌圭
• 申請（專利權）人: 北京三星通信技術研究有限公司;三星電子株式會社
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06K9/00
• 代理公司: 中科專利商標代理有限責任公司 11021
• 代理人: 趙偉

1.一種用于確定用戶的觸發意圖的方法，包括：

獲取用戶的至少一幅第一臉部圖像；

基于所述至少一幅第一臉部圖像確定所述用戶的第一注視位置；

在所確定的第一注視位置處顯示視覺刺激物；

獲取至少一幅第二臉部圖像；以及

基于所述至少一幅第二臉部圖像確定用戶意圖觸發與其預期注視位置相對應的事件。

2.根據權利要求1所述的方法，還包括：

基于所述至少一幅第二臉部圖像對所述第一注視位置進行校正，以獲得所述用戶的所述預期注視位置。

3.根據權利要求2所述的方法，還包括：

基于對所述預期注視位置的確定，響應于對所述用戶的觸發意圖的確定觸發與所述預期注視位置相對應的事件。

4.根據權利要求1所述的方法，其中，基于所述至少一幅第一臉部圖像確定所述用戶的第一注視位置包括：

基于所述至少一幅第一臉部圖像確定所述用戶的眼睛停止運動；以及

根據所述用戶的眼睛停止運動之后所述至少一幅第一臉部圖像中的一幅或多幅第一臉部圖像，計算所述用戶的第一注視位置。

5.根據權利要求2或3所述的方法，其中，基于所述至少一幅第二臉部圖像對所述第一注視位置進行校正以獲得所述用戶的預期注視位置包括：

計算所述至少一幅第二臉部圖像與所述至少一幅第一臉部圖像之間的視線位置的偏差；以及

使用所述偏差來校正所述第一注視位置。

6.根據權利要求5所述的方法，其中，計算所述至少一幅第二臉部圖像與所述至少一幅第一臉部圖像之間的視線位置的偏差包括：

基于所述至少一幅第二臉部圖像確定所述用戶的第二注視位置；以及

計算是第二注視位置與所述第一注視位置之間的偏差，作為所述至少一幅第二臉部圖像與所述至少一幅第一臉部圖像之間的視線位置的偏差。

7.根據權利要求5或6所述的方法，其中，計算所述至少一幅第二臉部圖像與所述至少一幅第一臉部圖像之間的視線位置的偏差包括：

在所述至少一幅第一臉部圖像中選擇至少一個識別關鍵點；

在所述至少一幅第二臉部圖像中選擇相同數量的對應識別關鍵點；

計算所述至少一個識別關鍵點與所述對應識別關鍵點之間的對應偏差量；

基于所述對應偏差量獲得針對所述至少一幅第二臉部圖像與所述至少一幅第一臉部圖像之間的視線位置的偏差的訓練模型；以及

根據所述訓練模型估計所述至少一幅第二臉部圖像與所述至少一幅第一臉部圖像之間的視線位置的偏差。

8.根據權利要求7所述的方法，還包括：

對所述對應偏差量進行歸一化，以使用歸一化后的對應偏差量來獲得所述訓練模型。

9.根據權利要求5或6所述的方法，其中，計算所述至少一幅第二臉部圖像與所述至少一幅第一臉部圖像之間的視線位置的偏差包括：

利用深度神經網絡對所述至少一幅第二臉部圖像和所述至少一幅第一臉部圖像進行處理，以提取所述至少一幅第二臉部圖像與所述至少一幅第一臉部圖像之間的視線位置的偏差。

10.一種用于確定用戶的觸發意圖的設備，包括：

第一圖像獲取模塊，用于獲取用戶的至少一幅第一臉部圖像；

位置確定模塊，用于基于所述至少一幅第一臉部圖像確定所述用戶的第一注視位置；

視覺刺激物添加模塊，用于在所確定的第一注視位置處顯示視覺刺激物；

第二圖像獲取模塊，用于獲取至少一幅第二臉部圖像；以及

觸發意圖確定模塊，用于基于所述至少一幅第二臉部圖像確定用戶意圖觸發與其預期注視位置相對應的事件。

11.一種用于確定用戶的觸發意圖的設備，包括：

存儲器，用于存儲可執行指令；以及

處理器，用于執行存儲器中存儲的可執行指令，以執行根據權利要求1-9中任一項所述的方法。

12.一種其上承載有計算機程序的存儲器設備，當由處理器執行所述計算機程序時，所述計算機程序使所述處理器執行根據權利要求1-9中任一項所述的方法。