[發明專利]數字人生成方法、裝置、電子設備及存儲介質

在審

• 申請號: 202110018557.8
• 申請日: 2021-01-07
• 公開（公告）號: CN112767520A
• 公開（公告）日: 2021-05-07
• 發明（設計）人: 楊國基;劉致遠;陳瀧翔;王鑫宇;王雅峰;劉云峰
• 申請（專利權）人: 深圳追一科技有限公司
• 主分類號: G06T13/40
• 分類號: G06T13/40;G06F16/33;G06F16/332
• 代理公司: 深圳市智圈知識產權代理事務所(普通合伙) 44351
• 代理人: 苗燕

本申請實施例公開了一種數字人生成方法、裝置、電子設備及存儲介質，該方法包括獲取控制參數和方位參數，方位參數包括目標物相對于參考位置的相對位置信息；根據控制參數控制3D數字人的動作狀態，根據方位參數確定3D數字人的呈現角度；獲取與呈現角度和動作狀態對應的數字人圖像；輸出數字人圖像。通過該方法的實施，可以獲取到控制參數和方位參數，基于控制參數控制3D數字人的動作狀態，根據方位參數確定3D數字人的呈現角度，獲取并輸出與呈現角度對應的數字人圖像，使得模擬出用戶能夠實時與3D數字人處于面對面交流的環境，提升了呈現3D數字人畫面的逼真效果，優化了人機交互體驗。

技術領域

本申請涉及人機交互技術領域，更具體地，涉及一種數字人生成方法、裝置、電子設備及存儲介質。

背景技術

近些年來，隨著信息技術的不斷發展和應用，為滿足用戶需求，數字人呈現場景也日益增多。傳統的數字人呈現方法一般是通過固定幾個動作，針對不同場景向用戶呈現對應狀態下的數字人。而為了提升用戶體驗，現階段出現了一種通過數字人呈現的方法，該種方法通常是通過神經網絡的訓練，控制數字人能夠呈現更加多樣化的動作，從而保證呈現效果更好。雖然該種方法相較于傳統的數字人呈現方法，顯示效果更加逼真，但是由于在現有技術中該通過數字人呈現的方法中，數字人呈現畫面通常會固定呈現角度，呈現畫面的呈現效果不逼真。

發明內容

鑒于上述問題，本申請提出了一種數字人生成方法、裝置、電子設備及存儲介質，以解決以上問題之一。

第一方面，本申請實施例提供了一種數字人生成方法，該數字人生成方法包括：獲取控制參數和方位參數，方位參數包括目標物相對于參考位置的相對位置信息；根據控制參數控制3D數字人的動作狀態，根據方位參數確定3D數字人的呈現角度；獲取與呈現角度和動作狀態對應的數字人圖像；以及輸出數字人圖像。

可選地，獲取與呈現角度和動作狀態對應的數字人圖像，包括：獲取3D數字人的當前呈現角度；以及根據當前呈現角度和呈現角度調整數字人圖像中3D數字人所呈現的方位，得到與呈現角度對應的數字人圖像。

可選地，在獲取控制參數和方位參數，方位參數包括目標物相對于參考位置的相對位置信息的步驟之前，數字人生成方法還包括：獲取多張包括目標模特的樣本圖像；根據多張樣本圖像獲取目標模特的形態信息；以及獲取原始3D數字人以及原始3D數字人的建模信息，并根據形態信息和建模信息，生成3D數字人。

可選地，形態信息包括面部信息；獲取原始3D數字人以及原始3D數字人的建模信息，并根據形態信息和建模信息，生成3D數字人，包括：獲取原始3D數字人以及建模信息，建模信息包括原始3D數字人的原始面部關鍵點；以及根據面部信息獲取目標模特的目標面部關鍵點，將原始面部關鍵點與目標面部關鍵點對應，生成3D數字人。

可選地，數字人生成方法還包括：根據面部信息定義目標模特的面部表情；以及將面部表情與目標面部關鍵點關聯，以使3D數字人的面部關鍵點與面部表情對應。

可選地，獲取控制參數和方位參數，方位參數包括目標物相對于參考位置的相對位置信息，包括：獲取用于描述目標物位置的第一空間位置信息和用于描述參照物位置的第二空間位置信息，參照物用于為目標物提供參照坐標；根據第一空間位置信息獲取3D數字人的目標坐標參數；根據第二空間位置信息獲取參照物的參照坐標參數；以及將目標坐標參數與參照坐標參數進行比對，確定目標物與參照物之間的距離和相對角度，得到包括距離和相對角度的方位參數。

可選地，控制參數包括輸入信息；根據控制參數控制3D數字人的動作狀態，根據方位參數確定3D數字人的呈現角度，包括：獲取與輸入信息對應的語義信息；根據語義信息得到與語義信息對應的3D數字人的面部表情參數；根據面部表情參數控制3D數字人的面部表情，以控制3D數字人的動作狀態。