[發明專利]電視虛擬形象情緒動作表達方法、系統和可讀存儲介質

在審

• 申請號: 202011129456.X
• 申請日: 2020-10-21
• 公開（公告）號: CN112182194A
• 公開（公告）日: 2021-01-05
• 發明（設計）人: 高瑗蔚
• 申請（專利權）人: 南京創維信息技術研究院有限公司
• 主分類號: G06F16/332
• 分類號: G06F16/332;G06F40/30;G06T17/00;G10L15/26
• 代理公司: 江蘇舜點律師事務所 32319
• 代理人: 洪黎

本發明公開了電視虛擬形象情緒動作表達方法、系統和可讀存儲介質，涉及虛擬形象的技術領域，旨在提供一種在電視端構建3D虛擬形象并與虛擬形象進行交互的方案。其技術方案要點是利用建模工具制作3D虛擬形象，讀取3D虛擬形象的骨骼和表情信息，根據骨骼和表情信息制作動作表情庫；輸入包含有動作和表情的文字或命令，將文字或命令與對應動作和表情進行匹配配置；采集輸入語音，對輸入語音進行語音識別和語義識別，將識別結果與動作表情庫進行匹配，輸出匹配成功的動作和/或表情。本發明達到了在電視端構建虛擬形象，并且用戶能夠與虛擬形象進行交互的效果。

技術領域

本申請涉及虛擬形象的技術領域，尤其是涉及一種電視虛擬形象情緒動作表達方法、系統和可讀存儲介質。

背景技術

近年來，現在市場上的電視機開機效率越來越低，號稱能享受交互體驗的智能電視，在啟動時都會進入到一段無法跳過的廣告。這個時候用戶的不耐煩情緒調動，導致體驗感降低。隨著語音技術的快速發展，目前的智能電視已經能夠實現人機交互，主要涉及幫助用戶與電視機進行溝通的軟硬件設備，但是大多數人機交互方式只能遙控器遙控、語音識別控制、動作識別控制等，這樣的交互顯得比較單調無趣。

隨著時代的進步，計算機虛擬形象技術研究成為了當下非常流行的方向之一，并且越來越多地用于在線社交環境中，成為形成用戶帶入感和親密感的一個重要組成部分。計算機虛擬形象技術作為一個市場相對成熟的領域，能夠通過自由組合不同的虛擬形象部件器官來創造極大數量的不同虛擬形象臉孔，然后可以使用各種深度學習方法，學習如何表達通過面部表情表達情緒，甚至控制虛擬形象做出不同姿勢。如果在電視端構建虛擬形象，并且用戶能夠與虛擬形象進行交互，將會大大增加電視的趣味性，給電視行業的發展帶來巨大的影響力。

申請內容

本申請的目的是提供一種電視虛擬形象情緒動作表達方法、系統和可讀存儲介質，其具有在電視端構建虛擬形象，并且用戶能夠與虛擬形象進行交互的效果。

本申請的上述申請目的一是通過以下技術方案得以實現的：

一種電視虛擬形象情緒動作表達方法，包括以下步驟：

利用建模工具制作3D虛擬形象，讀取3D虛擬形象的骨骼和表情信息，根據骨骼和表情信息制作動作表情庫，將3D虛擬形象和動作表情庫嵌入電視端安卓系統；

輸入包含有動作和表情的文字或命令，將文字或命令與對應動作和表情進行匹配配置；

采集輸入語音，對輸入語音進行語音識別和語義識別，將識別結果與動作表情庫進行匹配，通過3D虛擬形象輸出匹配成功的動作和/或表情。

本申請進一步設置為：向電視端安卓系統導入場景庫，將場景庫內的場景與特定動作和/或表情建立連接，將場景與對應文字或命令進行匹配配置，當輸入語音進行語音識別和語義識別后的結果中出現與場景匹配的文字或命令時，同步輸出匹配的場景及與該場景連接的動作和/或表情。

本申請進一步設置為：向電視端安卓系統導入回復語句庫，將回復語句庫內的每條回復語句與特定動作和/或表情建立連接，將回復語句與對應文字或命令進行匹配配置，當輸入語音進行語音識別和語義識別后的結果中出現與回復語句匹配的文字或命令時，同步輸出匹配的回復語句及與該回復語句連接的動作和/或表情。

本申請進一步設置為：向電視端安卓系統導入任務庫，調取當前時間，將任務庫內的任務與固定時間段進行綁定，當前時間為固定時間段時，根據任務庫任務從動作表情庫和場景庫中調用并輸出對應動作和/或表情和/或場景。

本申請進一步設置為：對輸入語音進行語音識別后以文字形式輸出語音識別結果。

本申請的上述申請目的二是通過以下技術方案得以實現的：

一種電視虛擬形象情緒動作表達系統，包括：語音分析模塊，用于對輸入語音進行語音識別和語義分析并輸出語音分析結果；