[發明專利]一種注意力檢測方法及裝置

有效

• 申請號: 201910353333.5
• 申請日: 2019-04-29
• 公開（公告）號: CN110059666B
• 公開（公告）日: 2022-04-01
• 發明（設計）人: 王飛;黃詩堯;錢晨
• 申請（專利權）人: 北京市商湯科技開發有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V40/18;G06Q30/02
• 代理公司: 北京中知恒瑞知識產權代理事務所(普通合伙) 11889
• 代理人: 陳曉川

本申請公開了一種注意力檢測方法及裝置。該方法包括：獲取用戶注視時的人臉圖像和/或人臉在所述人臉圖像中的相對位置信息；獲取所述人臉圖像的整臉和/或局部特征信息；以及根據以下信息中的一個或多個：所述人臉圖像的整臉特征信息、所述人臉圖像的局部特征信息、人臉在所述人臉圖像中的相對位置信息，獲取注視區域的概率。還公開了相應的裝置。采用本申請的方案，采用端到端的方式，輸入注視時的人臉圖像和/或人臉在人臉圖像中的相對位置信息，可以得到注視區域的概率，從而可以實現準確、可靠的注意力檢測。

技術領域

本申請涉及圖像處理技術領域，尤其涉及一種注意力檢測方法及裝置。

背景技術

對注意力檢測的研究具有十分重要的意義。注意力檢測技術可以應用在各行各業，例如，公共交通監控系統，廣告機監控系統等。以廣告機監控系統為例，廣告機注視監控系統通過攝像頭檢測行人，采集行人的臉部圖像，并且實時分析統計該行人是否在注視廣告機，對改進廣告機的廣告投放策略有重要意義。然而，注意力的檢測存在許多技術難點，目前還沒有一個可行的注意力檢測方案。

發明內容

本申請提供一種注意力檢測方法及裝置，以實現準確、可靠的注意力的檢測。

第一方面，提供了一種注意力檢測方法，所述方法包括：

獲取用戶注視時的人臉圖像和/或人臉在所述人臉圖像中的相對位置信息；

獲取所述人臉圖像的整臉和/或局部特征信息；

根據以下信息中的一個或多個：所述人臉圖像的整臉特征信息、所述人臉圖像的局部特征信息、人臉在所述人臉圖像中的相對位置信息，獲取注視區域的概率。

在一個實現中，所述獲取所述人臉圖像的整臉和/或局部特征信息，包括：

獲取所述人臉圖像的整臉特征圖；

根據所述人臉圖像的整臉特征圖，獲取所述整臉特征圖的整臉特征向量。

在另一個實現中，根據所述人臉圖像的整臉特征信息，獲取注視區域的概率，包括：

根據所述整臉特征向量，獲取所述注視區域的概率。

在又一個實現中，所述獲取所述人臉圖像的整臉和/或局部特征信息，包括：

檢測眼睛在所述人臉圖像中的位置；

根據眼睛在所述人臉圖像中的位置，確定眼睛在所述整臉特征圖中的位置。

在又一個實現中，所述獲取所述人臉圖像的整臉和/或局部特征信息，包括：

根據眼睛在所述整臉特征圖中的位置，獲取眼睛局部特征圖；

根據所述眼睛局部特征圖，獲取所述眼睛局部特征圖的眼睛局部特征向量。

在又一個實現中，所述根據眼睛在所述人臉圖像中的位置，確定所述眼睛在所述整臉特征圖中的位置，包括：

將眼睛在所述整臉特征圖中的位置與眼睛在所述人臉圖像中的位置對齊，得到眼睛在所述整臉特征圖中的位置。

在又一個實現中，所述根據眼睛在所述整臉特征圖中的位置，獲取眼睛局部特征圖，包括：

基于卷積神經網絡，獲取所述人臉圖像的整臉特征圖；

根據眼睛在所述整臉特征圖中的位置，獲取所述整臉特征圖中的眼睛局部特征圖。

在又一個實現中，根據所述人臉圖像的局部特征信息，獲取注視區域的概率，包括：

根據所述眼睛局部特征向量，獲取注視區域的概率。

在又一個實現中，所述方法還包括：