[發明專利]一種物聯網多點應答互動智能機器人系統

在審

• 申請號: 202010770621.3
• 申請日: 2020-08-04
• 公開（公告）號: CN111881261A
• 公開（公告）日: 2020-11-03
• 發明（設計）人: 胡瑞艇
• 申請（專利權）人: 胡瑞艇
• 主分類號: G06F16/33
• 分類號: G06F16/33;G06F16/332;G06K9/00;G06K9/46;G06K9/62;G10L15/22;H04L29/08;B25J11/00
• 代理公司: 北京盛凡智榮知識產權代理有限公司 11616
• 代理人: 李洪波

1.一種物聯網多點應答互動智能機器人系統，其特征在于：包括主應答互動智能機器人和輔助應答互動智能機器人，所述主應答互動智能機器人采用語音識別模塊、視覺模塊、人機交互顯示模塊，所述輔助應答互動機器人采用人體動作識別模塊和人臉表情識別模塊，通過所述主應答互動智能機器人跟使用者進行人機對話，所述輔助應答互動機器人識別人體動作、表情對使用者的問題進行補充說明。

2.根據權利要求1所述的一種物聯網多點應答互動智能機器人系統，其特征在于：所述語音識別模塊包括語音輸入部分、語音處理部分和語音輸出部分；所述語音輸入部分是將使用者的語音轉化為可供軟件識別的關鍵詞拼音串；所述語音處理部分是將測接收到的信息通過數據庫處理運算查詢匹配到相應的輸出信息；所述語音輸出部分是將所述輸出信息轉化為相應的語音進行輸出。

3.根據權利要求1所述的一種物聯網多點應答互動智能機器人系統，其特征在于：所述視覺模塊采用立體視覺觀察方式，所述立體視覺基本原理是從兩個或多個視點觀察使用者，以獲取在不同視角下的感知圖象，通過三角測量原理計算圖象象素問的位置偏差來獲取使用者的三維信息。

4.根據權利要求3所述的一種物聯網多點應答互動智能機器人系統，其特征在于：所述立體視覺至少包括圖象獲取部分、攝象機定標特征提取部分、立體匹配部分和深度確定部分及內插部分；所述圖象獲取部分是通過高性能攝像機沿周圍空間陣列拍攝圖象；所述攝像定標特征提取部分是通過確定攝象機的位置、屬性參數和建立成象模型，以便確定空間坐標系中物體點同它在圖象平面上象點之間的對應關系；所述立體匹配部分是通過匹配算法尋找特征的本質屬性及建立能正確匹配所選特征模型；所述深度確認部分是確定空間位置坐標點時的誤差來源，以及圖象量化效應對立體測量精度的影響進行了詳細的分析形成立體模型；所述內插部分是通過所述表面內插重建算法，恢復使用者及周圍景物可視表面的完整信息。

5.根據權利要求1所述的一種物聯網多點應答互動智能機器人系統，其特征在于：所述人機交互顯示模塊是采用HMI智能串口觸摸屏實現人機交互。

6.根據權利要求1所述的一種物聯網多點應答互動智能機器人系統，其特征在于：所述人體動作識別模塊是對人體動作進行捕獲識別，并使機器人通過藍牙與外界進行通信，指令發送至控制器，控制器控制機器人實現相應的功能并執行相應的動作，從而實現人機交互功能。

7.根據權利要求1所述的一種物聯網多點應答互動智能機器人系統，其特征在于：所述人臉表情識別模塊是至少由人臉檢測、表情特征提取、表情分類和交互策略模塊等組成；所述人臉檢測是通過雙目機器人攝像頭拍攝獲取；所述表情特征提取是將所述人臉表情圖像中提取包含形狀和紋理而且判別性高的特征信息；所述表情分類是將提取到所述表情特征按照人體面部表情進行分類；所述交互策略模塊是將識別出所述人臉表情分類處理結果反饋給所述語音交互模塊；所述人臉表情識別模塊中的特征提取基于AAM和BRISK組合模型的特征提取方法。

8.根據權利要求1所述的一種物聯網多點應答互動智能機器人系統，其特征在于：所述主應答互動智能機器人和所述輔助應答互動機器人通過上位機系統協同控制，并采用同一數據庫。