[發明專利]一種用于智能機器人的視聽交互系統及其交互控制方法

在審

• 申請號: 201910896540.5
• 申請日: 2019-09-20
• 公開（公告）號: CN110695989A
• 公開（公告）日: 2020-01-17
• 發明（設計）人: 胡峰俊
• 申請（專利權）人: 浙江樹人學院(浙江樹人大學)
• 主分類號: B25J9/16
• 分類號: B25J9/16;B25J13/00
• 代理公司: 33304 杭州永航聯科專利代理有限公司
• 代理人: 李鈴

1.一種用于智能機器人的視聽交互系統，其特征在于，包括機器人本體(1)，所述機器人本體(1)上連接設有視覺交互機構(2)和聽覺交互機構(3)；

其中，所述視覺交互機構(2)包括動作捕捉模塊(4)，所述動作捕捉模塊(4)的一側通過藍牙模塊(5)與移動設備模塊(6)相連接，所述動作捕捉模塊(4)上連接有身份信息識別模塊(7)，所述身份信息識別模塊(7)與所述動作捕捉模塊(4)均通過互聯網模塊(8)與云儲存器模塊(9)相連接，所述身份信息識別模塊(7)上連接設有動作指令儲存模塊(11)和動作識別對比模塊(12)，其中，所述動作識別對比模塊(12)與所述動作指令儲存模塊(11)相連接，所述動作指令儲存模塊(11)上連接設有動作指令錄入模塊(13)和動作指令編輯輸入模塊(14)，所述動作指令錄入模塊(13)與所述動作捕捉模塊(4)相連接，所述動作識別對比模塊(12)上連接設有動作指令發送模塊(15)；

所述聽覺交互機構(3)包括聲音捕捉模塊(16)，所述聲音捕捉模塊(16)上連接設有聲音指令判斷模塊(17)，所述聲音指令判斷模塊(17)上連接設有語音關鍵信息提取模塊(18)，所述語音關鍵信息提取模塊(18)上連接設有語音指合核查對比模塊(19)，所述語音指令核查對比模塊(19)上連接設有語音指合儲存模塊(20)，所述語音指令儲存模塊(20)上連接設有語音指令錄入模塊(21)，所述語音指令錄入模塊(21)與所述聲音捕捉模塊(16)相連接，所述語音指令核查對比模塊(19)上連接設有語音信息指令發送模塊(22)，所述語音信息指令發送模塊(22)和所述動作指令發送模塊(15)分別與所述機器人本體(1)相連接。

2.根據權利要求1所述的一種用于智能機器人的視聽交互系統，其特征在于，所述動作捕捉模塊(4)上連接設有捕捉信息反饋模塊(23)。

3.根據權利要求2所述的一種用于智能機器人的視聽交互系統，其特征在于，所述移動設備模塊包括手機、平板電腦、手表電話、帶有藍牙連接的智能腕帶其中的一種。

4.根據權利要求3所述的一種用于智能機器人的視聽交互系統，其特征在于，所述身份信息識別模塊(7)包括密碼輸入識別模塊(24)、人臉輸入識別模塊(25)、特殊動作輸入識別模塊(26)、音色判斷識別模塊(27)、體態特征輸入識別模塊(28)和指紋輸入識別模塊(29)中的一種。

5.根據權利要求4所述的一種用于智能機器人的視聽交互系統，其特征在于，所述動作識別對比模塊(12)上連接設有語音提示模塊一(30)。

6.根據權利要求5所述的一種用于智能機器人的視聽交互系統，其特征在于，所述語音指令核查對比模塊(19)上連接設有語音提示模塊二(31)。

7.根據權利要求6所述的一種用于智能機器人的視聽交互系統，其特征在于，所述語音信息指令發送模塊(22)與所述動作指令發送模塊(15)分別與組合信息對比模塊(32)相連接，所述組合信息對比模塊(32)上連接有所述機器人本體(1)和組合信息儲存模塊(33)。

8.根據權利要求7所述的一種用于智能機器人的視聽交互系統，其特征在于，所述聽覺交互機構(3)上設有深度聲音識別機構，所述深度聲音識別機構包括音色信息錄取儲存模塊(34)、音色判斷模塊(35)、信息通斷模塊一(36)和信息通斷模塊二(37)，其中，所述音色信息錄取儲存模塊(34)與所述聲音捕捉模塊(16)和所述音色判斷模塊(35)相連接，所述音色判斷模塊(35)通過信息通斷模塊二(37)與所述語音關鍵信息提取模塊(18)相連接，所述信息通斷模塊一(36)位于所述聲音指令判斷模塊(17)和所述語音關鍵信息提取模塊(18)之間連接。

9.根據權利要求8所述的一種用于智能機器人的視聽交互系統，其特征在于，所述機器人本體(1)上設有指令完成反饋模塊(10)。

10.一種用于智能機器人的交互控制方法，其特征在于，用于權利要求9所述的用于智能機器人的視聽交互系統的使用，包括以下步驟：

通過提前錄入語音指令和動作指令到語音指令儲存模塊和動作指令儲存模塊內；

通過相關人員進行語音指令輸入和動作指令輸入，通過語音指令核查對比模塊和動作識別對比模塊進行識別，若正確，則將該指令發送給機器人本體，機器人本體進行做出相應的動作；

若指令不正確，則對比識別語音提示一和對比識別語音提示二進行語音提示；

若相關人員指令動作較多，可通過組合信息儲存模塊進行拓展組合信息，進而拓展操作機器人本體的指令，在通過語音信息指令發送模塊和動作指令發送模塊發送到組合信息判斷對比模塊中判斷是否為組合指令，若不是則發送給機器人本體，若是則通過對比組合信息儲存模塊中的儲存信息，將其發送給機器人本體；

機器人完成相關指令動作后，指令完成反饋模塊做出相應。