[發(fā)明專利]一種注意力水平檢測方法、裝置、計(jì)算設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請?zhí)枺?/td>: 202011592015.3
• 申請日: 2020-12-29
• 公開（公告）號(hào): CN112597935A
• 公開（公告）日: 2021-04-02
• 發(fā)明（設(shè)計(jì)）人: 樊碩
• 申請（專利權(quán)）人: 北京影譜科技股份有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京萬思博知識(shí)產(chǎn)權(quán)代理有限公司 11694
• 代理人: 孫黎生

1.一種注意力水平檢測方法，包括：

采用SSIM算法從監(jiān)控設(shè)備輸出的視頻中提取關(guān)鍵幀；

采用卷積神經(jīng)網(wǎng)絡(luò)檢測所述關(guān)鍵幀中人物的睡意、注視情況及面部表情；

根據(jù)睡意檢測結(jié)果、面部表情檢測結(jié)果、以及注視情況檢測結(jié)果確定視頻中人物的注意力水平。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述的根據(jù)睡意檢測結(jié)果、面部表情檢測結(jié)果、以及注視情況檢測結(jié)果確定視頻中人物的注意力水平包括：

根據(jù)睡意檢測結(jié)果、面部表情檢測結(jié)果、以及注視情況檢測結(jié)果確定每一幀為專注或不專注；

統(tǒng)計(jì)專注和不專注的幀數(shù)，并根據(jù)專注幀數(shù)和不專注幀數(shù)計(jì)算專注度百分比。

3.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，

睡意檢測結(jié)果包括陰性和陽性，當(dāng)所述睡意檢測結(jié)果為陽性時(shí)，表明所述關(guān)鍵幀中的人物正在睡覺；

注視檢測結(jié)果包括陰性和陽性，當(dāng)所述注視檢測結(jié)果為陽性時(shí)，表明所述關(guān)鍵幀中的人物注意力集中；

面部表情檢測結(jié)果包括陰性情緒和陽性情緒。

4.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，所述的SSIM算法所采用的公式為：

SSIM(x，y)＝l(x，y).c(x，y).s(x，y)

其中，l(x,y)表示圖像x和圖像y之間亮度的變化，c(x,y)表示圖像x和圖像y之間對(duì)比度的變化，s(x,y)表示圖像x和圖像y之間像素結(jié)構(gòu)的變化，SSIM(x,y)表示圖像x和圖像y之間的相似度指數(shù)。

5.一種注意力水平檢測裝置，包括：

關(guān)鍵幀提取模塊，其配置成采用SSIM算法從監(jiān)控設(shè)備輸出的視頻中提取關(guān)鍵幀；

檢測模塊，其配置成采用卷積神經(jīng)網(wǎng)絡(luò)檢測所述關(guān)鍵幀中人物的睡意、注視情況及面部表情；和

判斷模塊，其配置成根據(jù)睡意檢測結(jié)果、面部表情檢測結(jié)果、以及注視情況檢測結(jié)果確定視頻中人物的注意力水平。

6.根據(jù)權(quán)利要求5所述的裝置，其特征在于，所述的判斷模塊包括：

專注情況判斷子模塊，其配置成根據(jù)睡意檢測結(jié)果、面部表情檢測結(jié)果、以及注視情況檢測結(jié)果確定每一幀為專注或不專注；和

計(jì)算子模塊，其配置成統(tǒng)計(jì)專注和不專注的幀數(shù)，并根據(jù)專注幀數(shù)和不專注幀數(shù)計(jì)算專注度百分比。

7.根據(jù)權(quán)利要求5或6所述的裝置，其特征在于，

睡意檢測結(jié)果包括陰性和陽性，當(dāng)所述睡意檢測結(jié)果為陽性時(shí)，表明所述關(guān)鍵幀中的人物正在睡覺；

注視檢測結(jié)果包括陰性和陽性，當(dāng)所述注視檢測結(jié)果為陽性時(shí)，表明所述關(guān)鍵幀中的人物注意力集中；

面部表情檢測結(jié)果包括陰性情緒和陽性情緒。

8.根據(jù)權(quán)利要求5或6所述的裝置，其特征在于，所述的SSIM算法所采用的公式為：

SSIM(x，y)＝l(x，y).c(x，y).s(x，y)

其中，l(x,y)表示圖像x和圖像y之間亮度的變化，c(x,y)表示圖像x和圖像y之間對(duì)比度的變化，s(x,y)表示圖像x和圖像y之間像素結(jié)構(gòu)的變化，SSIM(x,y)表示圖像x和圖像y之間的相似度指數(shù)。

9.一種計(jì)算設(shè)備，包括存儲(chǔ)器、處理器和存儲(chǔ)在所述存儲(chǔ)器內(nèi)并能由所述處理器運(yùn)行的計(jì)算機(jī)程序，其中，所述處理器執(zhí)行所述計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)如權(quán)利要求1-4中任一項(xiàng)所述的方法。

10.一種存儲(chǔ)介質(zhì)，優(yōu)選為非易失性可讀存儲(chǔ)介質(zhì)，其內(nèi)存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序在由處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1-4中任一項(xiàng)所述的方法。