[發(fā)明專利]一種注意力識別方法和裝置

在審

• 申請?zhí)枺?/td>: 201910334039.X
• 申請日: 2019-04-24
• 公開（公告）號: CN111860033A
• 公開（公告）日: 2020-10-30
• 發(fā)明（設(shè)計）人: 何強(qiáng);宮團(tuán)基
• 申請（專利權(quán)）人: 北京三好互動教育科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06Q10/06;G06Q50/20;G06N3/04
• 代理公司: 北京集佳知識產(chǎn)權(quán)代理有限公司 11227
• 代理人: 羅滿

1.一種注意力識別方法，其特征在于，包括：

獲取上課時學(xué)生的學(xué)生圖像，對所述學(xué)生圖像中的人臉進(jìn)行檢測，得到注意力可信度參數(shù)；

根據(jù)所述注意力可信度參數(shù)，對注意力特征向量進(jìn)行計算；

根據(jù)計算得到的注意力特征向量，計算得到學(xué)生的注意力值，當(dāng)所述注意力值低于注意力閾值時，確定所述學(xué)生的注意力未在上課內(nèi)容上。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，對所述學(xué)生圖像中的人臉進(jìn)行檢測，得到注意力可信度參數(shù)，包括：

對所述學(xué)生圖像進(jìn)行歸一化處理；

將歸一化處理后的學(xué)生圖像輸入到人臉表情檢測網(wǎng)絡(luò)進(jìn)行處理，計算得到當(dāng)前的注意力可信度參數(shù)，所述注意力可信度參數(shù)，包括：眼睛張開可信度、斜視可信度、轉(zhuǎn)頭可信度、低頭可信度、以及嘴巴張開可信度。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，根據(jù)所述注意力可信度參數(shù)，對注意力特征向量進(jìn)行計算，包括：

獲取在計算得到當(dāng)前的注意力可信度參數(shù)之前計算得到的多個注意力可信度參數(shù)；

根據(jù)當(dāng)前的注意力可信度參數(shù)和所述多個注意力可信度參數(shù)，對注意力特征向量進(jìn)行計算。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，根據(jù)當(dāng)前的注意力可信度參數(shù)和所述多個注意力可信度參數(shù)，對注意力特征向量進(jìn)行計算，包括：

通過以下哪個是對注意力特征向量進(jìn)行計算：

其中，V_t表示注意力特征向量；表示權(quán)重值；X_t表示當(dāng)前的注意力可信度參數(shù)；X_t-1、X_t-2、…、X_t-p表示在計算得到當(dāng)前的注意力可信度參數(shù)之前計算得到的多個注意力可信度參數(shù)。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，根據(jù)計算得到的注意力特征向量，計算得到學(xué)生的注意力值，包括：

通過以下公式計算學(xué)生的注意力值：

y_t＝σ(WV_t+b)

其中，y_t表示學(xué)生的注意力值；W表示權(quán)重矩陣；b表示偏移值。

6.一種注意力識別裝置，其特征在于，包括：

獲取模塊，用于獲取上課時學(xué)生的學(xué)生圖像，對所述學(xué)生圖像中的人臉進(jìn)行檢測，得到注意力可信度參數(shù)；

計算模塊，用于根據(jù)所述注意力可信度參數(shù)，對注意力特征向量進(jìn)行計算；

處理模塊，用于根據(jù)計算得到的注意力特征向量，計算得到學(xué)生的注意力值，當(dāng)所述注意力值低于注意力閾值時，確定所述學(xué)生的注意力未在上課內(nèi)容上。

7.根據(jù)權(quán)利要求6所述的裝置，其特征在于，獲取模塊，用于對所述學(xué)生圖像中的人臉進(jìn)行檢測，得到注意力可信度參數(shù)，包括：

對所述學(xué)生圖像進(jìn)行歸一化處理；

將歸一化處理后的學(xué)生圖像輸入到人臉表情檢測網(wǎng)絡(luò)進(jìn)行處理，計算得到當(dāng)前的注意力可信度參數(shù)，所述注意力可信度參數(shù)，包括：眼睛張開可信度、斜視可信度、轉(zhuǎn)頭可信度、低頭可信度、以及嘴巴張開可信度。

8.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述計算模塊，具體用于：

獲取在計算得到當(dāng)前的注意力可信度參數(shù)之前計算得到的多個注意力可信度參數(shù)；

根據(jù)當(dāng)前的注意力可信度參數(shù)和所述多個注意力可信度參數(shù)，對注意力特征向量進(jìn)行計算。

9.根據(jù)權(quán)利要求8所述的裝置，其特征在于，根據(jù)當(dāng)前的注意力可信度參數(shù)和所述多個注意力可信度參數(shù)，對注意力特征向量進(jìn)行計算，包括：

通過以下公式對注意力特征向量進(jìn)行計算：

其中，V_t表示注意力特征向量；表示權(quán)重值；X_t表示當(dāng)前的注意力可信度參數(shù)；X_t-1、X_t-2、…、X_t-p表示在計算得到當(dāng)前的注意力可信度參數(shù)之前計算得到的多個注意力可信度參數(shù)。

10.根據(jù)權(quán)利要求6所述的裝置，其特征在于，根據(jù)計算得到的注意力特征向量，計算得到學(xué)生的注意力值，包括：

通過以下公式計算學(xué)生的注意力值：

y_t＝σ(WV_t+b)

其中，y_t表示學(xué)生的注意力值；W表示權(quán)重矩陣；b表示偏移值。