[發明專利]虛擬對象的驅動方法、裝置、可讀介質及電子設備

在審

• 申請號: 202310118642.0
• 申請日: 2023-01-31
• 公開（公告）號: CN116110398A
• 公開（公告）日: 2023-05-12
• 發明（設計）人: 畢成;馬澤君
• 申請（專利權）人: 北京有竹居網絡技術有限公司
• 主分類號: G10L15/25
• 分類號: G10L15/25;G06F18/23
• 代理公司: 北京英創嘉友知識產權代理事務所(普通合伙) 11447
• 代理人: 賀曉蕾

本公開涉及一種虛擬對象的驅動方法、裝置、可讀介質及電子設備，可以獲取目標虛擬對象對應的目標音頻；針對所述目標音頻對應的每個國際音標IPA，根據預先建立的IPA聚類簇確定所述IPA對應的目標唇形參數；所述IPA聚類簇包括多個IPA集合，每個IPA集合包括至少一個IPA，同一IPA集合中的IPA對應的唇形參數相同；根據每個所述IPA分別對應的所述目標唇形參數對所述目標虛擬對象進行唇形驅動。

技術領域

本公開涉及對虛擬對象的控制領域，具體地，涉及一種虛擬對象的驅動方法、裝置、可讀介質及電子設備。

背景技術

隨著用戶對品質細節的要求越來越高，對于一些虛擬對象的表情和口型的靈活、生動、自然表達也十分關注，因此，選用合適的虛擬對象的驅動方式顯得尤為重要。

相關技術中在對3D虛擬對象中的唇形進行驅動時，通常采用規則描述“文本信息--唇形變化曲線”的映射關系，其中，文本信息通常是音素序列和時長序列，但音素到唇形變化本身的動態變化比較復雜，因此，規則描述無法覆蓋全部的唇形變化，這會導致唇形的變化在觀感上存在不自然的問題，影響用戶的視覺體驗。

發明內容

提供該部分內容以便以簡要的形式介紹構思，這些構思將在后面的具體實施方式部分被詳細描述。該部分內容并不旨在標識要求保護的技術方案的關鍵特征或必要特征，也不旨在用于限制所要求的保護的技術方案的范圍。

第一方面，本公開提供一種虛擬對象的驅動方法，所述方法包括：

獲取目標虛擬對象對應的目標音頻；

針對所述目標音頻對應的每個IPA(International?Phonetic?Alphabet，國際音標)，根據預先建立的IPA聚類簇確定所述IPA對應的目標唇形參數；所述IPA聚類簇包括多個IPA集合，每個IPA集合包括至少一個IPA，同一IPA集合中的IPA對應的唇形參數相同；

根據每個所述IPA分別對應的所述目標唇形參數對所述目標虛擬對象進行唇形驅動。

第二方面，本公開提供一種虛擬對象的驅動裝置，所述裝置包括：

獲取模塊，用于獲取目標虛擬對象對應的目標音頻；

確定模塊，用于針對所述目標音頻對應的每個國際音標IPA，根據預先建立的IPA聚類簇確定所述IPA對應的目標唇形參數；所述IPA聚類簇包括多個IPA集合，每個IPA集合包括至少一個IPA，同一IPA集合中的IPA對應的唇形參數相同；

驅動模塊，用于根據每個所述IPA分別對應的所述目標唇形參數對所述目標虛擬對象進行唇形驅動。

第三方面，提供一種計算機可讀介質，其上存儲有計算機程序，該程序被處理裝置執行時實現本公開第一方面所述方法的步驟。

第四方面，提供一種電子設備，包括：

存儲裝置，其上存儲有至少一個計算機程序；

至少一個處理裝置，用于執行所述存儲裝置中的所述至少一個計算機程序，以實現本公開第一方面所述方法的步驟。