[發明專利]一種汽車虛擬精靈形象生成方法、系統、裝置和存儲介質

在審

• 申請號: 202110967795.3
• 申請日: 2021-08-23
• 公開（公告）號: CN113808281A
• 公開（公告）日: 2021-12-17
• 發明（設計）人: 龐智明;侯啟家;文志勛;莫桓;王冬;羅興梅
• 申請（專利權）人: 桂林未來鵬創軟件有限公司
• 主分類號: G06T19/00
• 分類號: G06T19/00;G06T5/00;G06K9/00;G06K9/46;G06K9/62;G06F21/32
• 代理公司: 北京輕創知識產權代理有限公司 11212
• 代理人: 陳曉華

1.一種汽車虛擬精靈形象生成方法，其特征在于，包括以下步驟：

獲取用戶的圖像信息和音頻信息，對所述圖像信息和所述音頻信息進行識別，得到特征信息集；所述特征信息集包括多維情感特征信息和多維人臉特征信息；

基于模糊層次分析法，根據所述多維情感特征信息確定交互氛圍；

根據所述多維人臉特征信息，計算得到所述用戶每個面部器官的面部特征向量，并基于K近鄰分類方法，將每個面部特征向量與預設面部模板庫進行匹配，得到每個面部器官的目標面部模板向量；

根據所述多維人臉特征信息、所述交互氛圍和所有目標面部模板向量，生成所述用戶的虛擬精靈形象。

2.根據權利要求1所述的汽車虛擬精靈形象生成方法，其特征在于，所述多維情感特征信息包括聲紋情感特征信息、表情情感特征信息和服裝色彩情感特征信息；確定所述用戶的交互氛圍的具體步驟包括：

對所述聲紋情感特征信息、所述表情情感特征信息和所述服裝色彩情感特征信息分別進行去噪處理；

分別根據去噪處理后的所述聲紋情感特征信息、所述表情情感特征信息和所述服裝色彩情感特征信息進行情感分類，分別得到所述聲紋情感特征信息對應的第一情感狀態、所述表情情感特征信息對應的第二情感狀態和所述服裝色彩情感特征信息對應的第三情感狀態；

采用所述模糊層次分析法，確定出所述第一情感狀態、所述第二情感狀態和所述第三情感狀態對于形成所述交互氛圍的權重集，并根據所述第一情感狀態、所述第二情感狀態、所述第三情感狀態和所述權重集，得到所述交互氛圍。

3.根據權利要求1所述的汽車虛擬精靈形象生成方法，其特征在于，所述多維人臉特征信息包括眉毛特征點信息、眼睛特征點信息、鼻子特征點信息、嘴巴特征點信息和面部輪廓特征點信息；面部特征向量包括眉毛特征向量、眼睛特征向量、鼻子特征向量、嘴巴特征向量和面部輪廓特征向量；計算得到每個面部器官的面部特征向量的具體步驟包括：

從所述圖像信息中提取眉毛圖像，對所述眉毛圖像依次進行歸一化處理和高斯模糊處理，得到眉毛處理圖像；根據所述眉毛特征點信息將所述眉毛處理圖像劃分為多個眉毛區域，計算每個眉毛區域中像素之和，并根據所有眉毛區域的像素之和構建所述眉毛特征向量；

從所述圖像信息中提取眼睛圖像，對所述眼睛圖像進行歸一化處理，并根據所述眼睛特征點信息對歸一化處理后的所述眼睛圖像進行HOG特征計算，得到所述眼睛特征向量；

從所述圖像信息中提取鼻子圖像，對所述鼻子圖像進行歸一化處理，并根據所述鼻子特征點信息對歸一化處理后的所述鼻子圖像進行HOG特征計算，得到所述鼻子特征向量；

從所述圖像信息中提取嘴巴圖像，對所述嘴巴圖像進行歸一化處理，并根據所述嘴巴特征點信息對歸一化處理后的所述嘴巴圖像進行HOG特征計算，得到所述嘴巴特征向量；

從所述圖像信息中提取面部輪廓圖像，根據所述面部輪廓特征點信息獲取所述輪廓圖像的最小外接矩形框；根據所述最小外接矩形框對所述面部輪廓特征點信息進行歸一化處理，得到多個目標輪廓特征點坐標；

分別計算每個目標輪廓特征點坐標與所述最小外接矩形框的中心之間的歐式距離，得到多個目標輪廓特征點距離，并根據所有目標輪廓特征點距離構建所述面部輪廓特征向量。

4.根據權利要求3所述的汽車虛擬精靈形象生成方法，其特征在于，生成所述用戶對應的所述虛擬精靈形象的具體步驟包括：

根據所述眉毛特征點信息計算出眉心位置信息；根據所述鼻子特征點信息和所述眉毛特征點信息，計算出面部高度信息；根據所述鼻子特征點信息和所述眼睛特征點信息，計算出面部中心位置信息；

根據所述眉心位置信息、所述面部高度信息和所述面部中心位置信息，計算得到額頭高度信息；根據所述面部輪廓特征點信息和所述眼睛特征點信息，計算出面部寬度信息；

根據所述眉心位置信息、所述面部中心位置信息、所述面部高度信息、所述面部寬度信息、所述額頭高度信息和所有面部模板向量，生成三維人臉圖像；

根據所述交互氛圍，對所述三維人臉圖像進行變換，得到所述用戶的對應的所述虛擬精靈形象。