[發(fā)明專利]一種眼動跟蹤方法、裝置、設(shè)備及存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202010700876.2
• 申請日: 2020-07-20
• 公開（公告）號: CN111966219A
• 公開（公告）日: 2020-11-20
• 發(fā)明（設(shè)計）人: 閆野;馬權(quán)智;印二威;鄧寶松;劉冠軍;宋明武;范曉麗;謝良
• 申請（專利權(quán)）人: 中國人民解放軍軍事科學(xué)院國防科技創(chuàng)新研究院;天津（濱海）人工智能軍民融合創(chuàng)新中心
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06K9/00;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京辰權(quán)知識產(chǎn)權(quán)代理有限公司 11619
• 代理人: 劉廣達

1.一種眼動跟蹤方法，其特征在于，包括：

獲取有眼鏡人員眼部圖像和無眼鏡人員眼部圖像作為數(shù)據(jù)集；

根據(jù)所述數(shù)據(jù)集訓(xùn)練神經(jīng)網(wǎng)絡(luò)模型；

根據(jù)所述神經(jīng)網(wǎng)絡(luò)模型對有眼鏡人員眼部圖像進行預(yù)處理；

根據(jù)所述預(yù)處理后的圖像進行眼動跟蹤。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取有眼鏡人員眼部圖像和無眼鏡人員眼部圖像作為數(shù)據(jù)集，包括：

將所述數(shù)據(jù)集劃分為訓(xùn)練集、測試集和驗證集。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述數(shù)據(jù)集訓(xùn)練神經(jīng)網(wǎng)絡(luò)模型，包括：

將有眼鏡人員眼部圖像作為所述神經(jīng)網(wǎng)絡(luò)模型的輸入，將無眼鏡人員眼部圖像作為所述神經(jīng)網(wǎng)絡(luò)模型的目標(biāo)，通過梯度下降法最小化損失函數(shù)，訓(xùn)練所述神經(jīng)網(wǎng)絡(luò)模型。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述神經(jīng)網(wǎng)絡(luò)模型對有眼鏡人員眼部圖像進行預(yù)處理之前，還包括：

判斷眼部圖像是否是有眼鏡人員眼部圖像；

當(dāng)是有眼鏡人員眼部圖像時，根據(jù)所述神經(jīng)網(wǎng)絡(luò)模型對有眼鏡人員眼部圖像進行預(yù)處理。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述神經(jīng)網(wǎng)絡(luò)模型對有眼鏡人員眼部圖像進行預(yù)處理，包括：

根據(jù)所述神經(jīng)網(wǎng)絡(luò)模型對有眼鏡人員眼部圖像進行消除多余光斑和消除眼鏡的處理。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述預(yù)處理后的圖像進行眼動跟蹤，包括：

通過眼動跟蹤算法對預(yù)處理后的圖像進行眼動跟蹤。

7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述眼動跟蹤算法包括基于外觀的眼動跟蹤算法或基于特征的眼動跟蹤算法。

8.一種眼動跟蹤裝置，其特征在于，包括：

獲取模塊，用于獲取有眼鏡人員眼部圖像和無眼鏡人員眼部圖像作為數(shù)據(jù)集；

訓(xùn)練模塊，用于根據(jù)所述數(shù)據(jù)集訓(xùn)練神經(jīng)網(wǎng)絡(luò)模型；

預(yù)處理模塊，用于根據(jù)所述神經(jīng)網(wǎng)絡(luò)模型對有眼鏡人員眼部圖像進行預(yù)處理；

跟蹤模塊，用于根據(jù)所述預(yù)處理后的圖像進行眼動跟蹤。

9.一種眼動跟蹤設(shè)備，其特征在于，包括處理器和存儲有程序指令的存儲器，其特征在于，所述處理器被配置為在執(zhí)行所述程序指令時，執(zhí)行如權(quán)利要求1至7任一項所述的眼動跟蹤方法。

10.一種計算機可讀介質(zhì)，其特征在于，其上存儲有計算機可讀指令，所述計算機可讀指令可被處理器執(zhí)行以實現(xiàn)如權(quán)利要求1至7任一項所述的一種眼動跟蹤方法。