[發明專利]眼球位置追蹤方法、裝置、終端及計算機可讀存儲介質

在審

• 申請號: 201810988937.2
• 申請日: 2018-08-28
• 公開（公告）號: CN109359512A
• 公開（公告）日: 2019-02-19
• 發明（設計）人: 胡藝飛;徐國強;邱寒
• 申請（專利權）人: 深圳壹賬通智能科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06N3/04
• 代理公司: 深圳市立智方成知識產權代理事務所(普通合伙) 44468
• 代理人: 王增鑫

1.一種眼球位置追蹤方法，其特征在于，包括：

對當前時刻待測人員的人臉圖像進行處理，確定所述人臉圖像中的人眼圖像及頭部相對于視覺基準點的轉動信息，其中，所述視覺基準點為初始時刻對應的人臉圖像中頭部相對于圖像采集設備的初始位置；

將所述人眼圖像及頭部相對于視覺基準點的轉動信息輸入至預設的眼球追蹤模型，確定眼球相對于視覺基準點的位置。

2.根據權利要求1所述的眼球位置追蹤方法，其特征在于，所述對當前時刻待測人員的人臉圖像進行處理，確定所述人臉圖像中的人眼圖像及頭部相對于視覺基準點的轉動信息，具體包括：

對當前時刻待測人員的人臉圖像進行特征區域劃分，以確定與人眼區域對應的人眼圖像；

基于預定的頭相對于視覺基準點的標準坐標，確定所述人臉圖像中頭部相對于視覺基準點轉動的偏移坐標，以作為頭部相對于視覺基準點的轉動信息。

3.根據權利要求1所述的眼球位置追蹤方法，其特征在于，所述將所述人眼圖像及頭部相對于視覺基準點的轉動信息輸入至預設的眼球追蹤模型，確定眼球相對于視覺基準點的位置，具體包括：

提取所述人眼圖像的眼部特征；

依據所述眼部特征和所述頭部相對于視覺基準點的轉動信息，確定眼球相對于視覺基準點的位置。

4.根據權利要求1所述的眼球位置追蹤方法，其特征在于，所述方法還包括：

將預先標記的人眼圖像、頭部相對于視覺基準點的轉動信息及眼球相對于視覺基準點的位置作為訓練樣本輸入至卷積神經網絡模型；

對所述卷積神經網絡模型進行訓練，直至收斂，得到眼球追蹤模型。

5.根據權利要求4所述的眼球位置追蹤方法，其特征在于，所述對所述卷積神經網絡模型進行訓練，直至收斂，得到眼球追蹤模型，具體包括：

提取所述人眼圖像中的眼部特征；

依據所述眼部特征和對應的頭部相對于視覺基準點的轉動信息，確定所述訓練樣本屬于各眼球相對于注視基準點的位置的概率值；

將最高概率值對應的眼球相對于注視基準點的位置作為輸出結果；

通過卷積神經網絡模型中的損失函數對所述輸出結果與所述訓練樣本預先標定的期望分類結果進行比較，若所述損失函數小于閾值，則所述訓練樣本的訓練結束，得到眼球追蹤模型；否則，將所述訓練樣本重新輸入到卷積神經網絡模型中進行訓練，在重新訓練之前通過反向算法，對卷積神經網絡模型的各個權重進行調節。

6.根據權利要求1所述的眼球位置追蹤方法，其特征在于，所述方法還包括：

依據預定識別時間區間內的所述眼球相對于視覺基準點的位置，確定眼球位置變化數據；

依據所述眼球位置變化數據，確定所述待測人員的心理狀態信息。

7.根據權利要求6所述的眼球位置追蹤方法，其特征在于，所述位置變化數據，包括眼珠轉動頻率和/或眼睛轉動方向；

所述依據所述眼球位置變化數據，確定所述待測人員的心理狀態信息，包括以下至少一項：

當所述眼珠轉動頻率大于預設閾值，和/或所述眼睛轉動方向滿足預設條件，確定所述待測人員的心理狀態信息為說謊狀態信息，否則，確定所述待測人員的心理狀態信息為正常狀態信息。

8.一種眼球位置追蹤裝置，其特征在于，包括：

人臉圖像處理模塊，用于對當前時刻待測人員的人臉圖像進行處理，確定所述人臉圖像中的人眼圖像及頭部相對于視覺基準點的轉動信息，其中，所述視覺基準點為初始時刻對應的人臉圖像中頭部相對于圖像采集設備的初始位置；

眼球位置確定模塊，用于將所述人眼圖像及頭部相對于視覺基準點的轉動信息輸入至預設的眼球追蹤模型，確定眼球相對于視覺基準點的位置。

9.一種眼球位置追蹤終端設備，其特征在于，包括：

處理器、存儲器和總線；

所述總線，用于連接所述處理器和所述存儲器；

所述存儲器，用于存儲操作指令；

所述處理器，用于通過調用所述操作指令，執行上述權利要求1至7中任一項所述的方法。

10.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于，所述存儲介質存儲有至少一條指令、至少一段程序、代碼集或指令集，所述至少一條指令、所述至少一段程序、所述代碼集或指令集由所述處理器加載并執行以實現如權利要求1至7中任一項所述的方法。