[發明專利]基于陣列鏡頭的學習興趣測試方法及裝置

在審

• 申請號: 201711067437.7
• 申請日: 2017-11-02
• 公開（公告）號: CN107832698A
• 公開（公告）日: 2018-03-23
• 發明（設計）人: 鄒建成;陳宇鵬
• 申請（專利權）人: 北方工業大學
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06Q50/20
• 代理公司: 北京北新智誠知識產權代理有限公司11100
• 代理人: 朱麗華

1.基于陣列鏡頭的學習興趣測試裝置，其特征在于，包括人眼活動軌跡檢測模塊，人臉表情識別模塊，關注度檢測模塊；

人眼活動軌跡檢測模塊，用于檢測人眼活動軌跡，得到人眼注視位置，并統計不同注視位置的注視時間；

人臉表情識別模塊，用于識別人臉表情；

關注度檢測模塊，用于根據人眼注視位置、注視時間及人臉表情，確定關注程度。

2.根據權利要求1所述的基于陣列鏡頭的學習興趣測試裝置，其特征在于，所述檢測人眼活動軌跡的方法是：

利用紅外鏡頭采集瞳孔具有光斑的人臉圖像；

從該人臉圖像中提取出人眼區域圖像；

從該人眼區域圖像中提取瞳孔圖像、光斑圖像；

確定瞳孔、光斑的中心坐標，

確定瞳孔、光斑的中心坐標與注視點坐標的關系；

根據連續的注視點坐標，得到人眼活動軌跡。

3.根據權利要求1所述的基于陣列鏡頭的學習興趣測試裝置，其特征在于，識別人臉表情的方法是：

利用陣列式鏡頭采集人臉圖像；

從人臉圖像中識別人臉區域圖像；

將人臉區域圖像調整為正面人臉姿態的人臉區域圖像；

將調整后的人臉區域圖像輸入卷積神經網絡模型，輸出人臉表情識別結果。

4.基于陣列鏡頭的學習興趣測試方法，其特征在于，包括：

檢測人眼活動軌跡，確定人眼注視位置、不同注視位置的注視時間；

識別人臉表情；

根據人眼注視位置、注視時間及相應的人臉表情，確定關注程度。

5.根據權利要求4所述的基于陣列鏡頭的學習興趣測試方法，其特征在于，所述檢測人眼活動軌跡的方法是：

利用紅外鏡頭采集瞳孔具有光斑的人臉圖像；

從該人臉圖像中提取出人眼區域圖像；

從該人眼區域圖像中提取瞳孔圖像、光斑圖像；

確定瞳孔、光斑的中心坐標，

確定瞳孔、光斑的中心坐標與注視點坐標的關系；

根據連續的注視點坐標，得到人眼活動軌跡。

6.根據權利要求5所述的基于陣列鏡頭的學習興趣測試方法，其特征在于，從所述人眼區域圖像中提取瞳孔圖像的方法是：

利用梯度算法確定所述人眼區域圖像中像素值變化最大的點，作為瞳孔點；以該瞳孔點為中心，劃分一個瞳孔區域；對該瞳孔區域利用OTSU算法，生成瞳孔圖像。

7.根據權利要求6所述的基于陣列鏡頭的學習興趣測試方法，其特征在于，從所述人眼區域圖像中提取光斑圖像的方法是：

對所述人眼區域圖像進行取反處理，生成取反后的人眼區域圖像；利用梯度算法確定取反后的人眼區域圖像中像素值變化最大的點，作為光斑點；以該光斑點為中心，劃分一個光斑區域；對該光斑區域依次利用OTSU算法，生成光斑圖像。