[發(fā)明專利]異常情緒檢測方法及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 202110338416.4
• 申請(qǐng)日: 2021-03-30
• 公開（公告）號(hào): CN113053385A
• 公開（公告）日: 2021-06-29
• 發(fā)明（設(shè)計(jì)）人: 高偉;張磊;鄭廣斌;郭銳鵬
• 申請(qǐng)（專利權(quán)）人: 中國工商銀行股份有限公司
• 主分類號(hào): G10L15/25
• 分類號(hào): G10L15/25;G10L15/26;G10L25/63;G06K9/00
• 代理公司: 北京三友知識(shí)產(chǎn)權(quán)代理有限公司 11127
• 代理人: 任默聞;王濤

本發(fā)明提供了一種異常情緒檢測方法及裝置，可用于金融領(lǐng)域或其他領(lǐng)域。所述方法包括：獲取工位視頻數(shù)據(jù)、區(qū)域視頻數(shù)據(jù)及人員語音數(shù)據(jù)，解析所述工位視頻數(shù)據(jù)及所述區(qū)域視頻數(shù)據(jù)，分別得到工位圖片組及區(qū)域圖片組；對(duì)所述工位圖片組及所述區(qū)域圖片組進(jìn)行識(shí)別，得到多個(gè)人員情緒識(shí)別結(jié)果，并對(duì)所述人員語音數(shù)據(jù)進(jìn)行識(shí)別，得到多個(gè)語音識(shí)別結(jié)果；根據(jù)所述人員情緒識(shí)別結(jié)果、語音識(shí)別結(jié)果及預(yù)設(shè)的行為規(guī)則參數(shù)，生成異常情緒檢測結(jié)果。本發(fā)明通過實(shí)時(shí)采集員工作時(shí)的音視頻數(shù)據(jù)，并對(duì)人員工作現(xiàn)場的情緒進(jìn)行實(shí)時(shí)識(shí)別與檢測，不僅可以提高現(xiàn)場檢測自動(dòng)化水平，而且也可以保證員工情緒穩(wěn)定，提供工作質(zhì)量，助力企業(yè)業(yè)務(wù)快速發(fā)展。

技術(shù)領(lǐng)域

本發(fā)明涉及情緒檢測技術(shù)領(lǐng)域，尤指一種異常情緒檢測方法及裝置。

背景技術(shù)

目前，很多行業(yè)由于其自身的特點(diǎn)，企業(yè)員工在工作現(xiàn)場的情緒狀態(tài)，會(huì)直接影響企業(yè)業(yè)績，甚至影響企業(yè)的發(fā)展。例如，客服人員以及催收人員這樣處理特殊問題的行業(yè)，員工需要嚴(yán)格遵守現(xiàn)場工作行為準(zhǔn)則，但常常面臨情緒干擾等問題。若無法及時(shí)檢測到員工的異常情緒，會(huì)對(duì)員工身心，甚至企業(yè)發(fā)展有重大影響。但是，目前各行業(yè)中，無法全面、準(zhǔn)確且及時(shí)的檢測員工異常情緒。

發(fā)明內(nèi)容

針對(duì)現(xiàn)有技術(shù)中存在的問題，本發(fā)明實(shí)施例的主要目的在于提供一種異常情緒檢測方法及裝置，實(shí)現(xiàn)對(duì)員工異常情緒進(jìn)行全面、準(zhǔn)確且及時(shí)的檢測。

為了實(shí)現(xiàn)上述目的，本發(fā)明實(shí)施例提供一種異常情緒檢測方法，所述方法包括：

獲取工位視頻數(shù)據(jù)、區(qū)域視頻數(shù)據(jù)及人員語音數(shù)據(jù)，解析所述工位視頻數(shù)據(jù)及所述區(qū)域視頻數(shù)據(jù)，分別得到工位圖片組及區(qū)域圖片組；

對(duì)所述工位圖片組及所述區(qū)域圖片組進(jìn)行識(shí)別，得到多個(gè)人員情緒識(shí)別結(jié)果，并對(duì)所述人員語音數(shù)據(jù)進(jìn)行識(shí)別，得到多個(gè)語音識(shí)別結(jié)果；

根據(jù)所述人員情緒識(shí)別結(jié)果、語音識(shí)別結(jié)果及預(yù)設(shè)的行為規(guī)則參數(shù)，生成異常情緒檢測結(jié)果。

可選的，在本發(fā)明一實(shí)施例中，所述對(duì)所述工位圖片組及所述區(qū)域圖片組進(jìn)行識(shí)別，得到多個(gè)人員情緒識(shí)別結(jié)果包括：

對(duì)所述區(qū)域圖片組中人員的步態(tài)進(jìn)行識(shí)別，得到人員步態(tài)識(shí)別結(jié)果；其中，所述人員步態(tài)識(shí)別結(jié)果屬于所述人員情緒識(shí)別結(jié)果。

可選的，在本發(fā)明一實(shí)施例中，所述根據(jù)所述人員情緒識(shí)別結(jié)果、語音識(shí)別結(jié)果及預(yù)設(shè)的行為規(guī)則參數(shù)，生成異常情緒檢測結(jié)果包括：

若所述人員步態(tài)識(shí)別結(jié)果中的步態(tài)情緒結(jié)果為異常，則判斷所述人員步態(tài)識(shí)別結(jié)果中的步態(tài)異常時(shí)間是否大于所述行為規(guī)則參數(shù)中的步態(tài)時(shí)間閾值，若是，則根據(jù)所述步態(tài)異常時(shí)間生成步態(tài)異常識(shí)別結(jié)果；其中，所述步態(tài)異常識(shí)別結(jié)果屬于所述異常情緒檢測結(jié)果。

可選的，在本發(fā)明一實(shí)施例中，所述對(duì)所述工位圖片組及所述區(qū)域圖片組進(jìn)行識(shí)別，得到多個(gè)人員情緒識(shí)別結(jié)果還包括：

對(duì)所述工位圖片組中的人員進(jìn)行面部表情識(shí)別，得到人員表情識(shí)別結(jié)果；其中，所述人員表情識(shí)別結(jié)果屬于所述人員情緒識(shí)別結(jié)果。

可選的，在本發(fā)明一實(shí)施例中，所述根據(jù)所述人員情緒識(shí)別結(jié)果、語音識(shí)別結(jié)果及預(yù)設(shè)的行為規(guī)則參數(shù)，生成異常情緒檢測結(jié)果還包括：

若所述人員表情識(shí)別結(jié)果中的面部表情結(jié)果為異常，則判斷所述人員表情識(shí)別結(jié)果中的表情異常時(shí)間是否大于所述行為規(guī)則參數(shù)中的表情時(shí)間閾值，若是，則根據(jù)所述表情異常時(shí)間生成表情異常識(shí)別結(jié)果；其中，所述表情異常識(shí)別結(jié)果屬于所述異常情緒檢測結(jié)果。

可選的，在本發(fā)明一實(shí)施例中，所述對(duì)所述人員語音數(shù)據(jù)進(jìn)行識(shí)別，得到多個(gè)語音識(shí)別結(jié)果包括：

對(duì)所述人員語音數(shù)據(jù)進(jìn)行語音識(shí)別，得到文本情緒識(shí)別結(jié)果、語速識(shí)別結(jié)果及音量識(shí)別結(jié)果；其中，所述文本情緒識(shí)別結(jié)果、語速識(shí)別結(jié)果及音量識(shí)別結(jié)果屬于所述語音識(shí)別結(jié)果。