[發明專利]一種個性化虛擬人像活化互動系統及方法

有效

• 申請號: 201911193278.4
• 申請日: 2019-11-28
• 公開（公告）號: CN111045582B
• 公開（公告）日: 2023-05-23
• 發明（設計）人: 黃元忠;盧慶華;宋衛
• 申請（專利權）人: 深圳市木愚科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/16;G06T13/40;G06V40/16
• 代理公司: 北京華夏正合知識產權代理事務所(普通合伙) 11017
• 代理人: 韓登營

本發明實施例公開了一種個性化虛擬人像活化互動系統及方法，包括：虛擬人像建模模塊，用于根據用戶選擇或上傳的照片構建出該照片中所含的人物的虛擬人像模型；識別模塊，用于對用戶當前的語音和面部表情進行識別，并提取出用戶當前的語音信息和頭面部狀態信息；語音合成模塊，根據所述用戶當前的語音信息和頭面部狀態信息，合成出虛擬人像用于應答互動的語音；智能活化模塊，基于所述用于應答用戶的語音驅動所述虛擬人像構建模塊構建的虛擬人像模型對用戶進行應答互動。由上，本申請可應用于智能化交互中，有利于豐富智能交互體驗。

技術領域

本發明實施例涉及人機交互，互動系統領域，特別涉及一種個性化虛擬人像活化互動系統及方法。

背景技術

目前，傳統的人機交互系統一般是，以智能語音為主要交互方式的系統設計，交互過程中用戶通過語音方式向計算機傳達指令或提出問題，計算機也用語音以及多媒體圖像顯示的方式反饋用戶。現有技術的缺點是，用戶不能改變設計好的交互方式，很少能夠通過選擇想聽的聲音，來更換計算機的聲音，更缺少真實的交流感，往往用戶面對的是一個機器人外形或者顯示器。因此，會有用戶在交互媒介和交互方式上希望追求更佳個性化、更佳擬人化的交互體驗。

因此，目前亟需一種個性化虛擬人像活化互動系統及方法，滿足人機交互過程中用戶對于個性化、擬人化的強烈需求，以改善大眾用戶對于人機交互的刻板影響，促進人機交互系統得到更廣泛的使用。

發明內容

有鑒于此，本申請提供一種個性化虛擬人像活化互動系統及方法，以使得用戶可以根據自己的需要選擇或自定義構虛擬模特，從而改善人機交互的套路式交互流程，豐富交互方式，從而提高用戶對于人機交互過程中的體驗。

本申請提供一種個性化虛擬人像活化互動系統，包括：

虛擬人像自動建模模塊，用于根據用戶選擇或上傳的照片構建出該照片中所含的人物的虛擬人像模型；

識別模塊，用于對用戶當前的語音和面部表情進行識別，并提取出用戶當前的語音信息和頭面部狀態信息；

語音合成模塊，用于根據所述用戶當前的語音信息和頭面部狀態信息，合成出虛擬人像用于應答互動的語音；

智能活化模塊，用于合成基于所述虛擬人像模型的視頻影像，并驅動所述視頻影像中的虛擬人像模型表達所述語音合成模塊合成的所述用于應答用戶的語音，以對用戶進行應答互動。

由上，可以根據用戶自己選擇創建虛擬人物形象，進一步的提供與用戶地互動，從而可以提升交互過程中的用戶體驗，豐富交互方式的種類，推動人機交互技術的應用。

優選地，所述系統，還包括：可視化交互模塊，其用于：提供用于上傳或選擇照片的選項，以及提供用于為虛擬人像選擇聲音模型的選項。

由上，可以為虛擬人像選擇聲音模型，有利于滿足用戶的不同的多樣化地需求。

優選地，聲音模型合成模塊，用于通過人工智能技術建模以生成不同類型的聲音模型。

由上，聲音模型合成模塊提前預生成不同類型的聲音模型，有利于提供給用戶選擇，有利于滿足用戶的不同的多樣化地需求。

優選地，所述聲音模型的聲音素材來自真實授課教師的講話或者網絡素材；

其中，不同類型的聲音模型包含由不同的語音、語調和語氣構成的完整語句。

優選地，所述虛擬人像自動建模模塊對照片中的人物進行三維人臉輪廓和紋理重建，將照片中人臉面部信息轉化為三維模型；并保留照片中人臉的面部細節信息和紋理顏色信息；

其中，所構建的虛擬人像模型保留的照片中人臉面部信息中的特征，至少包括以下其一：

額頭，眼睛，鼻子，嘴巴，下巴，臉頰，胡須，眉毛，睫毛，眼球顏色，唇色，眼影，膚色以及面部局部皺紋。