[發明專利]一種關注區域檢測方法、裝置、可讀存儲介質及終端設備

有效

• 申請號: 201911151904.3
• 申請日: 2019-11-21
• 公開（公告）號: CN111046744B
• 公開（公告）日: 2023-04-18
• 發明（設計）人: 王杉杉;胡文澤;王孝宇
• 申請（專利權）人: 深圳云天勵飛技術股份有限公司
• 主分類號: G06V40/18
• 分類號: G06V40/18;G06V40/16;G06V10/80;G06V10/774;G06V10/778
• 代理公司: 深圳中一聯合知識產權代理有限公司 44414
• 代理人: 劉永康

1.一種關注區域檢測方法，其特征在于，包括：

獲取待檢測的目標人臉圖像；

計算所述目標人臉圖像的頭部姿態；

提取所述目標人臉圖像中的左眼圖像和右眼圖像；

根據所述左眼圖像、所述右眼圖像和所述頭部姿態確定視線關注方向；

分別在所述左眼圖像和所述右眼圖像中進行眼部關鍵點檢測，得到左眼瞳孔中心點的坐標和右眼瞳孔中心點的坐標；

根據所述左眼瞳孔中心點的坐標和所述右眼瞳孔中心點的坐標計算雙眼瞳孔中心點的坐標；

根據所述雙眼瞳孔中心點的坐標計算所述雙眼瞳孔中心點與預設的屏幕之間的點面距離；

根據所述視線關注方向、所述雙眼瞳孔中心點的坐標和所述點面距離計算眼部關注點的坐標；

根據預設的基準像素點的坐標和所述眼部關注點的坐標分別計算第一距離和第二距離，所述第一距離為所述基準像素點和所述眼部關注點在預設的第一坐標軸方向上的距離，所述第二距離為所述基準像素點和所述眼部關注點在預設的第二坐標軸方向上的距離；

根據所述第一距離和預設的第一轉換系數計算所述眼部關注點在所述第一坐標軸方向上的像素位置；

根據所述第二距離和預設的第二轉換系數計算所述眼部關注點在所述第二坐標軸方向上的像素位置；

根據預設的屏幕分辨率判斷所述像素位置是否處于所述屏幕的范圍內；

若所述像素位置處于所述屏幕的范圍內，則根據預設的屏幕區域劃分規則確定所述像素位置所處的屏幕區域；

將所述像素位置所處的屏幕區域確定為所述眼部關注區域。

2.根據權利要求1所述的關注區域檢測方法，其特征在于，所述根據所述左眼圖像、所述右眼圖像和所述頭部姿態確定視線關注方向包括：

將所述左眼圖像、所述右眼圖像和所述頭部姿態輸入到預訓練好的視線預測模型中進行處理，得到所述視線關注方向；

所述視線預測模型的處理過程包括：

分別在所述左眼圖像和所述右眼圖像中進行特征信息提取，得到左眼特征信息和右眼特征信息；

將所述左眼特征信息和所述右眼特征信息進行融合處理，得到雙眼特征信息；

將所述雙眼特征信息和所述頭部姿態進行融合處理，得到所述視線關注方向。

3.根據權利要求1至2中任一項所述的關注區域檢測方法，其特征在于，在根據所述視線關注方向、所述左眼瞳孔中心點的坐標和所述右眼瞳孔中心點的坐標確定眼部關注區域之后，還包括：

提取所述目標人臉圖像中的人臉特征信息；

根據所述人臉特征信息確定與所述目標人臉圖像對應的用戶信息；

確定與所述眼部關注區域對應的屏幕展示信息；

建立所述用戶信息與所述屏幕展示信息之間的對應關系。