[發明專利]人機互動系統和方法

無效

• 申請號: 201110299683.1
• 申請日: 2011-09-30
• 公開（公告）號: CN103034323A
• 公開（公告）日: 2013-04-10
• 發明（設計）人: 董德福;吳冠廷
• 申請（專利權）人: 德信互動科技（北京）有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G10L15/22;G10L15/26
• 代理公司: 北京中原華和知識產權代理有限責任公司 11019
• 代理人: 壽寧

1.一種人機互動系統，其特征在于，包括：視頻捕捉裝置、聲音捕捉裝置和控制裝置；

所述視頻捕捉裝置，用于實時攝取圖像，并輸出；

所述聲音捕捉裝置，用于拾取聲音信號，并輸出；

所述控制裝置包括：

接收模塊，用于接收所述視頻捕捉裝置傳輸來的圖像；

手部提取模塊，用于從所述接收模塊接收到的圖像中提取用戶手部輪廓信息，并根據所述手部輪廓信息確定用戶的手部姿勢；

存儲模塊，用于預先存儲手部姿勢與控制設備的輸入信息的對應關系信息；

控制模塊，用于將手部提取模塊確定的手部姿勢在所述存儲模塊中存儲的對應關系信息中進行匹配查找，以確定手部提取模塊確定出的手部姿勢對應的控制裝置的輸入信息；

語音識別模塊，用于對所述聲音捕捉裝置拾取的聲音信號進行語音識別處理；

關鍵詞模塊，用于從所述語音識別模塊的語音識別處理結果中提取關鍵詞，并輸出所述關鍵詞；

執行模塊，用于在所述控制模塊確定出的輸入信息與所述關鍵詞相匹配時，根據所述控制模塊確定出的輸入信息或所述關鍵詞執行相應的操作。

2.如權利要求1所述的人機互動系統，其特征在于，所述視頻捕捉裝置和所述聲音捕捉裝置與所述控制裝置集成設置于同一電子設備中。

3.如權利要求2所述的人機互動系統，其特征在于，所述電子設備包括：計算機、游戲機、移動電話、平板電腦、機頂盒、電視機頂盒一體機或者電視機。

4.如權利要求1所述的人機互動系統，其特征在于，所述視頻捕捉裝置和/或聲音捕捉裝置與所述控制裝置獨立分離設置。

5.如權利要求4所述的人機互動系統，其特征在于，所述控制裝置設置于計算機、游戲機、移動電話、平板電腦、機頂盒、電視機頂盒一體機或者電視機中。

6.一種人機互動方法，其特征在于，所述方法包括：

實時攝取圖像，并拾取聲音信號；

從所述攝取的圖像中提取用戶手部輪廓信息；

根據所述手部輪廓信息確定用戶的手部姿勢；

將所述手部姿勢在預先存儲的手部姿勢與控制設備的輸入信息的對應關系信息中匹配查找，以確定所述用戶的手部姿勢對應的控制設備的輸入信息；

對所述聲音信號進行語音識別處理；

從所述語音識別處理結果中提取關鍵詞；

在所述確定出的輸入信息與所述關鍵詞相匹配時，根據所述確定出的輸入信息或者所述關鍵詞執行相應的操作。