[發明專利]虛擬人情感能力表現輸出方法及系統

在審

• 申請號: 201711461229.5
• 申請日: 2017-12-28
• 公開（公告）號: CN108229642A
• 公開（公告）日: 2018-06-29
• 發明（設計）人: 尚小維
• 申請（專利權）人: 北京光年無限科技有限公司
• 主分類號: G06N3/00
• 分類號: G06N3/00
• 代理公司: 北京聿華聯合知識產權代理有限公司 11611
• 代理人: 朱繪;張文娟

本發明提供一種虛擬人情感能力表現輸出方法，其包含以下步驟：獲取多模態輸入數據；調用機器人能力接口解析多模態輸入數據，提取多模態輸入數據中的情感要素；根據解析結果決策并生成多模態輸出數據，其中，多模態輸出數據包含情感數據，情感數據包含虛擬人眼部變化以及虛擬人皮膚肌理反應的展示數據；通過虛擬人的形象輸出多模態輸出數據。本發明提供的虛擬人情感能力表現輸出方法及系統能夠根據虛擬人的基礎情緒表現輸出匹配的展示數據，例如不同的眼部變化以及不同的皮膚肌理反應等，還能夠在輸出虛擬人情感時配合不同的淚腺作用。并且，本發明還能夠根據輸出時間以及程度值的變化來協助表現虛擬人的情感輸出，提升了用戶的交互體驗。

技術領域

本發明涉及人工智能領域，具體地說，涉及一種虛擬人情感能力表現輸出方法及系統。

背景技術

機器人聊天交互系統的開發致力于模仿人類對話。早期應用比較廣泛的聊天機器人應用程序包括小i聊天機器人或是蘋果手機上的siri聊天機器人等處理所接收到的輸入(包括文本或語音)并根據輸入做出相應的響應，以試圖在上下文之間模仿人類之間的交互。

然而，要想完全模仿人類進行多模態交互，在輸出多模態輸出數據時豐富多模態交互的內容，提升用戶的交互體驗，現有的這些機器人聊天系統遠遠達不到要求。

因此，本發明提供了一種虛擬人情感能力表現輸出方法及系統。

發明內容

為解決上述問題，本發明提供了一種虛擬人情感能力表現輸出方法，所述方法包含以下步驟：

獲取多模態輸入數據；

調用機器人能力接口解析所述多模態輸入數據，提取所述多模態輸入數據中的情感要素；

根據解析結果決策并生成多模態輸出數據，其中，所述多模態輸出數據包含情感數據，所述情感數據包含虛擬人眼部變化以及虛擬人皮膚肌理反應的展示數據；

通過所述虛擬人的形象輸出所述多模態輸出數據。

根據本發明的一個實施例，所述虛擬人具有基礎情緒表現，其中，所述基礎情緒表現包含但不限于：生氣、大笑、害羞、悲傷、含淚以及哭泣。

根據本發明的一個實施例，通過所述虛擬人的形象輸出所述多模態輸出數據的步驟還包含以下步驟：

根據所述虛擬人的基礎情緒表現輸出與所述基礎情緒表現匹配的所述虛擬人眼部變化以及所述虛擬人皮膚肌理反應的展示數據。

根據本發明的一個實施例，通過所述虛擬人的形象輸出所述多模態輸出數據的步驟還包含以下步驟：

輸出皮膚肌理反應以及淚腺作用；

或者，

在輸出所述情感數據時配合所述虛擬人的皮膚肌理反應以及淚腺作用。

根據本發明的一個實施例，在輸出所述情感數據時配合所述虛擬人的皮膚肌理反應以及淚腺作用的步驟還包含以下步驟：

在第一預設時間節點輸出第一預設程度值的所述皮膚肌理反應以及所述淚腺作用；

所述第一預設時間節點早于所述多模態輸出數據中的語音輸出時間節點。

根據本發明的一個實施例，通過所述虛擬人的形象輸出所述多模態輸出數據的步驟還包含以下步驟：

在第二預設時間節點輸出第二預設程度值的所述情感數據。

根據本發明的另一個方面，還提供了一種存儲介質，其上存儲有可執行以上任一項所述的方法步驟的程序代碼。

根據本發明的另一個方面，還提供了一種虛擬人情感能力表現輸出裝置，所述裝置包含：

獲取模塊，其用于獲取多模態輸入數據；