[發明專利]一種基于面部與語音識別的游戲控制系統及方法

在審

• 申請號: 201710283467.5
• 申請日: 2017-04-26
• 公開（公告）號: CN107145230A
• 公開（公告）日: 2017-09-08
• 發明（設計）人: 張冰心
• 申請（專利權）人: 合肥充盈信息科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G10L15/22;A63F13/55
• 代理公司: 北京和信華成知識產權代理事務所(普通合伙)11390
• 代理人: 胡劍輝

1.一種基于面部與語音識別的游戲控制系統，其特征在于：包括視覺采集模塊、視覺識別模塊、視覺對比模塊、語音采集模塊、語音識別模塊、語音對比模塊、數據庫、數據處理模塊、游戲控制模塊、多媒體展示模塊和語音播放模塊；

所述視覺采集模塊用于對游戲玩家的表情進行采集，并將采集的表情發送至視覺識別模塊；

所述視覺識別模塊用于將視覺采集模塊發送的表情信息轉化成視覺數字信號，并將視覺數字信號發送至視覺對比模塊；

所述視覺對比模塊用于對接收的視覺數字信號與數據庫中存儲的視覺數字信號進行對比；

所述語音采集模塊用于采集游戲玩家的語音，并將采集的語音信息發送至語音識別模塊；

所述語音識別模塊用于將語音采集模塊發送的語音信息轉化成語音數字信號，并將語音數字信號發送至語音對比模塊；

所述語音對比模塊用于對接收的語音數字信號與數據庫中存儲的語音數字信號進行比較；

所述數據庫用于存儲視覺數字信號和語音數字信息；

所述數據處理模塊用于對視覺對比模塊和語音對比模塊發送的數字信號進行處理，轉化成計算機識別的文本指令信息，并將文本信息發送至游戲控制模塊；

所述游戲控制模塊接收數據處理模塊發送的文本信息，根據文本信息對多媒體展示模塊和語音播放模塊進行控制；

所述多媒體展示模塊用于展示游戲中人物的動作；

所述語音播放模塊用于對游戲中的語音信息進行播放。

2.根據權利要求1所述的一種基于面部與語音識別的游戲控制系統，其特征在于：所述視覺采集模塊為攝像頭，用于采集游戲玩家的表情，游戲中人物的表情與游戲玩家的表情相一致。

3.根據權利要求1所述的一種基于面部與語音識別的游戲控制系統，其特征在于：所述語音采集模塊用于采集游戲玩家的語音信息，采集的用于對游戲中人物的動作及語言進行控制。

4.一種基于面部與語音識別的游戲控制方法，其特征在于，包括以下步驟：

S1、視覺采集模塊采集游戲玩家的表情信息，同時語音采集模塊，采集游戲玩家關鍵的語音信息；

S2、視覺識別模塊將視覺采集模塊采集的視覺信息轉化成視覺數字信號，轉化的視覺數字信號發送至視覺對比模塊，語音識別模塊將語音采集模塊采集的語音信息轉化成語音數字信號，轉化的語音數字信號發送至語音對比模塊；

S3、若視覺對比模塊接收的視覺數字信號與數據庫中存儲的數字信號相匹配，則視覺對比模塊將對比的結果及識別的視覺識別信號發送至數據處理模塊，若不匹配，則視覺對比模塊只發送對比失敗的結果至數據處理模塊；

S4、若語音對比模塊對關鍵的語音信息轉化的語音數字信號與數據庫中存儲的語音數字信號相匹配，則語音對比模塊將對比的結果及識別的語音識別信號發送至數據處理模塊，若匹配不成功，則語音對比模塊只發送匹配失敗的結果至數據處理模塊；

S5、數據處理模塊對匹配成功的視覺識別信號和語音識別信號進行處理，轉化成計算機識別的文本指令信息，并將文本指令信息發送至游戲控制模塊，數據處理模塊對匹配失敗的視覺識別信號和語音識別信號不進行處理；

S6、游戲控制模塊根據文本指令信息對游戲中的多媒體展示模塊和語音播放模塊進行控制。

5.根據權利要求4所述的一種基于面部與語音識別的游戲控制方法，其特征在于：游戲玩家運行游戲程序時，系統自動發送是否開啟攝像頭以及麥克風的提示指令至游戲玩家。