[發(fā)明專利]投票分類方法、裝置、電子設(shè)備及可讀存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202110720775.6
• 申請日: 2021-06-28
• 公開（公告）號: CN113435338A
• 公開（公告）日: 2021-09-24
• 發(fā)明（設(shè)計）人: 余華軍
• 申請（專利權(quán)）人: 平安科技（深圳）有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G06N3/04;G10L15/08;G06F40/30
• 代理公司: 深圳市沃德知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44347
• 代理人: 高杰;于志光

1.一種投票分類方法，其特征在于，所述方法包括：

對會議音視頻執(zhí)行聲紋分析及語音轉(zhuǎn)換，得到所述會議音視頻中每個參會人對應(yīng)的文本數(shù)據(jù)，并解析每個所述參會人對應(yīng)的文本數(shù)據(jù)，得到每個所述參會人的投票內(nèi)容；

對所述會議音視頻執(zhí)行人臉檢測及追蹤，得到每個所述參會人的微表情變化圖像集；

將每個所述參會人的微表情變化圖像集與預(yù)先設(shè)置的微表情分析模板執(zhí)行對比，得到微表情分析結(jié)果；

根據(jù)所述微表情分析結(jié)果，對所述投票內(nèi)容執(zhí)行投票分類，得到正常投票內(nèi)容及異常投票內(nèi)容。

2.如權(quán)利要求1所述的投票分類方法，其特征在于，所述對會議音視頻執(zhí)行聲紋分析及語音轉(zhuǎn)換，得到所述會議音視頻中每個參會人對應(yīng)的文本數(shù)據(jù)，包括：

獲取每個所述參會人的標(biāo)準(zhǔn)聲紋特征并保存至預(yù)構(gòu)建的聲紋庫中；

根據(jù)聲紋將所述會議音視頻分成不同的音頻片段，將所述音頻片段中的聲紋與所述聲紋庫進(jìn)行匹配，得到每個所述參會人的音頻片段；

對每個所述參會人的音頻片段進(jìn)行語音轉(zhuǎn)換，得到每個所述參會人對應(yīng)的文本數(shù)據(jù)。

3.如權(quán)利要求1所述的投票分類方法，其特征在于，所述解析每個所述參會人對應(yīng)的文本數(shù)據(jù)，得到每個所述參會人的投票內(nèi)容，包括：

對所述文本數(shù)據(jù)進(jìn)行候選詞篩選，得到候選詞集合；

對所述候選詞集合進(jìn)行特征值量化，得到關(guān)鍵詞；

將所述關(guān)鍵詞與預(yù)先訓(xùn)練好的投票模板進(jìn)行關(guān)鍵詞匹配，得到每個所述參會人的投票內(nèi)容。

4.如權(quán)利要求1所述的投票分類方法，其特征在于，所述對所述會議音視頻執(zhí)行人臉檢測及追蹤，得到每個所述參會人的微表情變化圖像集，包括：

利用音視頻解析工具提取所述會議音視頻中的視頻，得到會議視頻；

對所述會議視頻進(jìn)行人臉圖像采集及檢測，得到每個所述參會人的人臉圖像；

對每個所述參會人的人臉圖像進(jìn)行面部動作特征提取，得到每個所述參會人的微表情變化圖像集。

5.如權(quán)利要求4中所述的投票分類方法，其特征在于，所述對每個所述參會人的人臉圖像進(jìn)行面部動作特征提取之前，所述方法還包括：

對每個所述參會人的人臉圖像進(jìn)行光線補(bǔ)償處理、灰度變化處理、直方圖均衡化處理、歸一化處理、幾何校正及濾波與銳化處理。

6.如權(quán)利要求1至5中任意一項所述的投票分類方法，其特征在于，所述將每個所述參會人的微表情變化圖像集與預(yù)先設(shè)置的微表情分析模板執(zhí)行對比，得到微表情分析結(jié)果，包括：

對每個所述參會人的微表情變化進(jìn)行特征提取，得到每個所述參會人的微表情特征；

將每個所述參會人的微表情特征與所述微表情分析模板進(jìn)行模板匹配，得到微表情分析結(jié)果。

7.如權(quán)利要求1至5中任意一項所述的投票分類方法，其特征在于，所述根據(jù)所述微表情分析結(jié)果，對所述投票內(nèi)容執(zhí)行投票分類，得到正常投票內(nèi)容及異常投票內(nèi)容之后，所述方法還包括：

對所述微表情分析結(jié)果進(jìn)行回溯，得到所述異常投票內(nèi)容相對應(yīng)的參會人；

將所述異常投票內(nèi)容反饋至發(fā)出所述異常投票內(nèi)容的參會人，并在接收到所述發(fā)出所述異常投票內(nèi)容的參會人的更改投票請求時，更新所述發(fā)出所述異常投票內(nèi)容的參會人的更新后的投票內(nèi)容，得到更新后的投票內(nèi)容；

刪除未更新的異常投票內(nèi)容，匯總所述正常投票內(nèi)容及更新后的投票內(nèi)容，得到最終投票內(nèi)容。

8.一種投票分類裝置，其特征在于，包括：

投票內(nèi)容獲取模塊，用于對對會議音視頻執(zhí)行聲紋分析及語音轉(zhuǎn)換，得到所述會議音視頻中每個參會人對應(yīng)的文本數(shù)據(jù)，并解析每個所述參會人對應(yīng)的文本數(shù)據(jù)，得到每個所述參會人的投票內(nèi)容；

微表情分析模塊，用于對所述會議音視頻執(zhí)行人臉檢測及追蹤，得到每個所述參會人的微表情變化圖像集，將每個所述參會人的微表情變化圖像集與預(yù)先設(shè)置的微表情分析模板執(zhí)行對比，得到微表情分析結(jié)果；

投票分類模塊，用于根據(jù)所述微表情分析結(jié)果，對所述投票內(nèi)容執(zhí)行投票分類，得到正常投票內(nèi)容及異常投票內(nèi)容。