[發(fā)明專利]與智能機器人的應用程序有關的多模態(tài)交互方法及系統(tǒng)

在審

• 申請?zhí)枺?/td>: 201611173954.8
• 申請日: 2016-12-16
• 公開（公告）號: CN106845624A
• 公開（公告）日: 2017-06-13
• 發(fā)明（設計）人: 郭家
• 申請（專利權）人: 北京光年無限科技有限公司
• 主分類號: G06N3/00
• 分類號: G06N3/00
• 代理公司: 北京聿華聯(lián)合知識產(chǎn)權代理有限公司11611
• 代理人: 張文娟,朱繪

技術領域

本發(fā)明涉及智能機器人領域，尤其涉及一種與智能機器人的應用程序有關的多模態(tài)交互方法及系統(tǒng)，

背景技術

隨著智能機器人產(chǎn)品的逐漸普及，更多的智能機器人走進家庭，成為孩子的玩伴和大人的管家。

在現(xiàn)有技術中，考慮到智能機器人的使用便利性，某些智能機器人不包括鍵盤、鼠標和觸控屏等硬件輸入設備，用戶下達命令給機器人時，往往是通過語言或動作等方式來實現(xiàn)。但是，由于用戶的語言和動作的不確定性，這些語言和動作會存在多種含義，機器人在接收到采用上述方式下達的用戶指令時，無法明確用戶真實目的，執(zhí)行的指令往往與用戶的意圖不相匹配。因此，現(xiàn)有的機器人的智能性和擬人性較差，無法準確地執(zhí)行與用戶真實意圖相關的指令，降低了用戶體驗性。

因此，亟需提供一種能夠使智能機器人準確執(zhí)行用戶真實意圖的指令、提高智能機器人的智能性和擬人性的解決方案。

發(fā)明內容

本發(fā)明所要解決的技術問題之一是需要提供一種使智能機器人準確執(zhí)行用戶真實意圖的指令、提高智能機器人的智能性和擬人性的解決方案。

為了解決上述技術問題，本申請的實施例首先提供了一種與智能機器人的應用程序有關的多模態(tài)交互方法，該方法包括：接收用戶的多模態(tài)輸入指令，對所述多模態(tài)輸入指令分析，基于分析結果進行用戶意圖的篩選和匹配，所述用戶意圖包括與應用程序有關的操作表達；生成并向用戶輸出多模態(tài)意圖確認信息，以獲取針對目標應用程序的操作指令。

在一個實施例中，所述智能機器人安裝有機器人操作系統(tǒng)，所述應用程序運行在機器人操作系統(tǒng)中。

在一個實施例中，該方法還包括：獲取用戶響應所述多模態(tài)意圖確認信息的反饋信息，根據(jù)所述反饋信息啟停所述目標應用程序。

在一個實施例中，在存在多個用戶意圖時，根據(jù)用戶的習慣信息、上下文信息和/或場景信息對多個用戶意圖進行評分，以生成多模態(tài)意圖確認信息。

在一個實施例中，若存在兩個以上的評分超過設定閾值的用戶意圖，則生成與這些用戶意圖相關的用戶意圖選擇模式的多模態(tài)意圖確認信息；否則，生成與用戶意圖相關的用戶意圖判定模式的多模態(tài)意圖確認信息。

本發(fā)明實施例還提供了一種與智能機器人的應用程序有關的多模態(tài)交互系統(tǒng)，該多模態(tài)交互系統(tǒng)包括：多模態(tài)輸入指令分析模塊，其用于接收用戶的多模態(tài)輸入指令，對所述多模態(tài)輸入指令分析；用戶意圖篩選匹配模塊，其用于基于分析結果進行用戶意圖的篩選和匹配，所述用戶意圖包括與應用程序有關的操作表達；目標應用程序獲取模塊，其用于生成并向用戶輸出多模態(tài)意圖確認信息，以獲取針對目標應用程序的操作指令。

在一個實施例中，所述智能機器人安裝有機器人操作系統(tǒng)，所述應用程序運行在機器人操作系統(tǒng)中。

在一個實施例中，該多模態(tài)交互系統(tǒng)還包括：應用程序操作模塊，其用于獲取用戶響應所述多模態(tài)意圖確認信息的反饋信息，根據(jù)所述反饋信息啟停所述目標應用程序。

在一個實施例中，所述用戶意圖篩選匹配模塊，其進一步用于在存在多個用戶意圖時，根據(jù)用戶的習慣信息、上下文信息和/或場景信息對多個用戶意圖進行評分，以生成多模態(tài)意圖確認信息。

在一個實施例中，所述目標應用程序獲取模塊，其進一步用于在存在兩個以上的評分超過設定閾值的用戶意圖時，則生成與這些用戶意圖相關的用戶意圖選擇模式的多模態(tài)意圖確認信息；否則，生成與用戶意圖相關的用戶意圖判定模式的多模態(tài)意圖確認信息。

與現(xiàn)有技術相比，上述方案中的一個或多個實施例可以具有如下優(yōu)點或有益效果：

本發(fā)明的實施例提供了一種與智能機器人的應用程序有關的多模態(tài)交互方法，智能機器人在接收了用戶的多模態(tài)輸入指令后，對多模態(tài)輸入指令進行分析，然后基于分析結果進行用戶意圖的篩選和匹配，生成并向用戶輸出多模態(tài)意圖確認信息，根據(jù)用戶反饋的確認信息以獲取針對目標應用程序的操作指令。由此，在用戶以語音或動作發(fā)出模糊指令時，機器人能夠通過輸出意圖確認信息的方式來獲取準確的指令，執(zhí)行與指令對應的應用程序操作，提高了機器人的智能性和擬人性。

本發(fā)明的其它特征和優(yōu)點將在隨后的說明書中闡述，并且，部分地從說明書中變得顯而易見，或者通過實施本發(fā)明的技術方案而了解。本發(fā)明的目的和其他優(yōu)點可通過在說明書、權利要求書以及附圖中所特別指出的結構和/或流程來實現(xiàn)和獲得。

附圖說明