[發明專利]一種判別人員關注目標物的方法、裝置及計算機設備

有效

• 申請號: 202010762123.4
• 申請日: 2020-07-31
• 公開（公告）號: CN111898552B
• 公開（公告）日: 2022-12-27
• 發明（設計）人: 董勇;楊青川;寧瑤
• 申請（專利權）人: 成都新潮傳媒集團有限公司
• 主分類號: G06T7/73
• 分類號: G06T7/73;G06V40/16
• 代理公司: 成都頂峰專利事務所(普通合伙) 51224
• 代理人: 楊國瑞

本發明涉及行為識別技術領域，公開了一種判別人員關注目標物的方法、裝置及計算機設備。在所述判別人員關注目標物的方法中，不論目標物中心與相機坐標系原點是否重合，可以基于現場采集的人臉圖像，依次提取出現場人員的當前人臉姿態角和當前人臉多維數據，并將所述當前人臉姿態角與根據人臉多維數據與人臉姿態角范圍的對應關系確定出的且與所述當前人臉多維數據對應的當前人臉姿態角范圍相比較，若所述當前人臉姿態角處于所述當前人臉姿態角范圍內，則表明現場人員如用于采集所述人臉多維數據和所述人臉姿態角范圍的測試人員一樣，在現場關注所述目標物，進而可用較少的計算機資源，來判別人員是否關注目標物，實現遠場景下關注點的估計。

技術領域

本發明屬于行為識別技術領域，具體地涉及一種判別人員關注目標物的方法、裝置及計算機設備。

背景技術

在當下很多行業中，都需要及時感知觀眾的關注點，進而了解他們的興趣點和評判，以便改進設計方案，促進行業發展。為了判別觀眾是否關注目標物，在近場景情況下，如頭盔式場景等，通常采用眼球追蹤技術來實現關注點估計；但是在0.5米以上的遠場景，由于目前的技術很難追蹤眼球特征，進而難以實現關注點估計，因此這種情況下通常采用頭部姿態估計技術來實現。

前述頭部姿態估計技術的方案為：先通過一幅人臉圖像來獲得頭部的姿態角(在三維空間中，表示物體旋轉姿態可以由如下三個歐拉角來表示：圍繞直角坐標系X軸旋轉的俯仰角pitch，圍繞直角坐標系Y軸旋轉的偏航角yaw和圍繞直角坐標系Z軸旋轉的滾轉角roll，因此針對頭部而言，通俗講就是抬頭角、搖頭角和轉頭角，如圖1所示)，然后根據頭部姿態角來間接反映眼球的關注方向，若目標物位于該關注方向上，則將該目標物作為估計的關注點。目前通過一幅人臉圖像來獲得頭部姿態角的算法步驟一般如下：(1)對人臉圖像進行二維人臉關鍵點檢測；(2)將檢測到的二維人臉關鍵點與三維人臉模型中的對應人臉關鍵點進行匹配；(3)求解二維人臉關鍵點與對應三維人臉關鍵點的轉換關系矩陣；(4)根據所述旋轉關系矩陣求解頭部相對于相機坐標系(該相機坐標系即為以拍攝所述人臉圖像的相機的聚焦中心為原點且以光軸為Z軸建立的三維直角坐標系)的三個歐拉角。

目前適用于頭部姿態估計技術的場景僅為當目標物中心與相機坐標系原點重合的情況，此時采用固定的偏航角yaw和俯仰角pitch即可判別人體頭部是否關注目標物。但是當目標物中心與相機坐標系原點不重合時，由于相機處于第三視角，不能替代目標物視角，如果再次基于固定的偏航角yaw和俯仰角pitch來判別，勢必會造成很大誤差，甚至南轅北轍，因此亟需提供一種新的技術解決方案。

發明內容

為了解決在現有頭部姿態估計技術中所存在的適用場景有限，不能適用于當目標物中心與相機坐標系原點不重合情況的問題，本發明目的在于提供一種判別人員關注目標物的方法、裝置、計算機設備及計算機可讀存儲介質，不論目標物中心與相機坐標系原點是否重合，都可以基于現場采集的人臉圖像且用較少的計算機資源，來判別人員是否關注目標物，實現遠場景下關注點的估計。

第一方面，本發明提供了一種判別人員關注目標物的方法，包括：

獲取人臉圖像，其中，所述人臉圖像包含有至少一個人員；

從所述人臉圖像中，提取出所述人員的當前人臉姿態角和當前人臉多維數據；

根據人臉多維數據與人臉姿態角范圍的對應關系，確定出與所述當前人臉多維數據對應的當前人臉姿態角范圍，其中，所述人臉姿態角范圍是指對應所述人臉多維數據能夠關注到目標物的人臉姿態角區間；

當所述當前人臉姿態角位于所述當前人臉姿態角范圍內時，判定所述人員在關注所述目標物。