[發明專利]一種虛擬機器人的交互方法、系統及機器人

在審

• 申請號: 201680001715.6
• 申請日: 2016-07-07
• 公開（公告）號: CN106663127A
• 公開（公告）日: 2017-05-10
• 發明（設計）人: 楊新宇;王昊奮;邱楠
• 申請（專利權）人: 深圳狗尾草智能科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30;B25J11/00
• 代理公司: 深圳市華優知識產權代理事務所(普通合伙)44319
• 代理人: 李麗君

1.一種虛擬機器人的交互方法，其特征在于，包括：

獲取用戶的多模態信息；

對所述多模態信息進行預處理，識別用戶意圖；

根據所述多模態信息和用戶意圖生成內容信息和選擇生成模板；

將所述內容信息與生成模板通過預設規則進行組合后生成交互內容；

將交互內容發送到成像系統，成像系統根據交互內容生成虛擬3D影像；

機器人根據所述交互內容生成評價信息。

2.根據權利要求1所述的交互方法，其特征在于，在生成交互內容的步驟之后還包括：將交互內容發送到移動終端，所述移動終端根據交互內容生成圖像、聲音、文字中的一種或幾種，并顯示。

3.根據權利要求2所述的交互方法，其特征在于，在將交互內容發送到成像系統和移動終端的步驟之后還包括：獲取用戶對交互內容的評價，并將用戶的評價存儲在相應的交互內容的目錄中。

4.根據權利要求1所述的交互方法，其特征在于，對所述多模態信息進行預處理，識別用戶意圖的步驟具體包括：對多模態信息進行預處理，識別用戶控制機器人作畫的意圖；

所述根據所述多模態信息和用戶意圖生成內容信息和選擇生成模板的步驟包括：根據多模態信息和用戶意圖生成圖像信息和選擇圖像風格模板；

所述將所述內容信息與生成模板通過預設規則進行組合后生成交互內容的步驟包括：根據選擇的圖像風格模板與圖像信息進行組合后生成交互內容；

所述成像系統根據交互內容生成虛擬3D影像的步驟包括：成像系統根據交互內容生成作畫動作的3D影像，并配上對應的語音。

5.根據權利要求4所述的交互方法，其特征在于，所述圖像信息通過機器人數據庫或用戶圖庫獲取。

6.根據權利要求1所述的交互方法，其特征在于，對所述多模態信息進行預處理，識別用戶意圖的步驟包括：對多模態信息進行預處理，識別用戶控制機器人作曲的意圖；

所述根據所述多模態信息和用戶意圖生成內容信息和選擇生成模板的步驟包括：根據多模態信息和用戶意圖選擇作曲風格模板和作曲內容；

所述將所述內容信息與生成模板通過預設規則進行組合后生成交互內容的步驟包括：根據作曲風格模板和作曲內容生成交互內容；

所述成像系統根據交互內容生成虛擬3D影像的步驟包括：成像系統根據交互內容生成作曲動作的3D影像，并配上對應的語音。

7.根據權利要求1所述的交互方法，其特征在于，對所述多模態信息進行預處理，識別用戶意圖的步驟包括：對多模態信息進行預處理，識別用戶控制機器人作詩的意圖；

所述根據所述多模態信息和用戶意圖生成內容信息和選擇生成模板的步驟包括：根據多模態信息和用戶意圖選擇作詩風格模板和作詩內容；

所述將所述內容信息與生成模板通過預設規則進行組合后生成交互內容的步驟包括：根據作詩風格模板和作詩內容生成交互內容；

所述成像系統根據交互內容生成虛擬3D影像的步驟包括：成像系統根據交互內容生成作詩語音，并配上作詩動作的3D影像。

8.根據權利要求1所述的交互方法，其特征在于，對所述多模態信息進行預處理，識別用戶意圖的步驟包括：對多模態信息進行預處理，識別用戶控制機器人朗讀的意圖；

所述根據所述多模態信息和用戶意圖生成內容信息和選擇生成模板的步驟包括：根據多模態信息和用戶意圖選擇朗讀內容和朗讀背景；

所述將所述內容信息與生成模板通過預設規則進行組合后生成交互內容的步驟包括：根據朗讀內容和朗讀背景生成交互內容；

所述成像系統根據交互內容生成虛擬3D影像的步驟包括：成像系統根據交互內容生成朗讀語音，并配上朗讀動作的3D影像。

9.一種虛擬機器人的交互系統，其特征在于，包括：

獲取模塊，用于獲取用戶的多模態信息；

意圖識別模塊，用于對所述多模態信息進行預處理，識別用戶意圖；

處理模塊，用于根據所述多模態信息和用戶意圖生成內容信息和選擇生成模板；

生成模塊，用于將所述內容信息與生成模板通過預設規則進行組合后生成交互內容；

發送模塊，用于將交互內容發送到成像系統，成像系統根據交互內容生成虛擬3D影像；

評價模塊，機器人根據所述交互內容生成評價信息。