[發明專利]生成3D動畫的方法和裝置

有效

• 申請號: 201810756050.0
• 申請日: 2018-07-11
• 公開（公告）號: CN108961369B
• 公開（公告）日: 2023-03-17
• 發明（設計）人: 吳松城;陳軍宏
• 申請（專利權）人: 廈門黑鏡科技有限公司
• 主分類號: G06T13/40
• 分類號: G06T13/40
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 王學強

本申請實施例公開了生成3D動畫的方法和裝置。該方法的一具體實施方式包括：獲取包括臉部圖像的照片，以及識別出照片中的臉部圖像；根據臉部圖像重建3D模型；對3D模型中的至少一個頂點與預設的至少一個骨骼點進行適配與綁定；對于至少一個骨骼點中的骨骼點，驅動3D模型中該骨骼點綁定的頂點按照該骨骼點的預設的運動軌跡進行運動生成3D動畫。該實施方式能夠以3D動畫的方式動態地展示照片，使得照片的表情更加生動。

技術領域

本申請實施例涉及計算機技術領域，具體涉及生成3D動畫的方法和裝置。

背景技術

現在的照片大多只能靜態地呈現景物，可娛樂性低，對于用戶來說較為無聊。

對于讓靜止人物圖像活動起來，通常是采用計算機動畫處理。針對臉部特寫的活動，美術設計人員需要提前做好臉部特定的圖片模型，然后形成連續的序列幀畫面，或者是對臉部建模，綁定好骨頭或肌肉，按幀率進行拉伸、紋理貼圖、實時渲染、形成序列幀畫面。

發明內容

本申請實施例提出了生成3D動畫的方法和裝置。

第一方面，本申請實施例提供了一種生成3D動畫的方法，包括：獲取包括臉部圖像的照片，以及識別出照片中的臉部圖像；根據臉部圖像重建3D模型；對3D模型中的至少一個頂點與預設的至少一個骨骼點進行適配與綁定；對于至少一個骨骼點中的骨骼點，驅動3D模型中該骨骼點綁定的頂點按照該骨骼點的預設的運動軌跡進行運動生成3D動畫。

在一些實施例中，識別出照片中的臉部圖像，包括：通過深度神經網絡檢測出照片中的臉部圖像以及臉部圖像的類別。

在一些實施例中，根據臉部圖像重建3D模型，包括：通過決策樹識別出臉部圖像的關鍵點；根據關鍵點，采用3D形變模型對臉部圖像進行3D模型重建和貼圖處理，得到3D模型。

在一些實施例中，決策樹與臉部圖像的類別相對應；以及通過決策樹識別出臉部圖像的關鍵點，包括：根據臉部圖像的類別從預設的決策樹集合中選擇與類別對應的決策樹；通過所選擇的決策樹識別出臉部圖像的關鍵點。

在一些實施例中，該方法還包括：獲取預先建立的牙齒模型；根據3D模型中臉部的形狀和尺寸調整牙齒模型的形狀和尺寸，得到與3D模型匹配的待貼圖牙齒模型；根據臉部圖像的灰度和/或亮度對待貼圖牙齒模型進行貼圖處理得到目標牙齒模型。

在一些實施例中，該方法還包括：根據3D模型中嘴唇的位置將目標牙齒模型綁定到3D模型中；響應于檢測到在3D動畫中3D模型中的嘴唇張開，在3D動畫中顯示目標牙齒模型中未被嘴唇遮擋的部分。

在一些實施例中，該方法還包括：獲取預設的3D的平面模型，使用照片對平面模型進行貼圖操作；根據貼圖操作確定出照片和平面模型之間的第一關系，其中，第一關系包括以下至少一項：平移、旋轉、縮放；從3D模型重建過程中獲取的臉部圖像的關鍵點與3D模型的關鍵點的對應關系中確定出3D模型和照片之間的第二關系；根據第一關系和第二關系確定平面模型和3D模型之間的第三關系；將平面模型和3D模型一起置入3D場景中；根據第三關系對3D場景進行渲染。

第三方面，本申請實施例提供了一種電子設備，包括：處理器和存儲器；其中，存儲器用于存儲程序；處理器用于實現如第一方面中任一的方法。

第四方面，本申請實施例提供了一種計算機可讀介質，其上存儲有計算機程序，其中，程序被處理器執行時實現如第一方面中任一的方法。

本申請實施例提供的生成3D動畫的方法和裝置，通過臉部圖像重建3D模型，再驅動3D模型中各骨骼點綁定的頂點按照各骨骼點的預設的運動軌跡進行運動生成3D動畫。從而使得二維的照片立體化，并且以3D動畫的方式動態地展示照片，使得照片的表情更加生動。

附圖說明

通過閱讀參照以下附圖所作的對非限制性實施例所作的詳細描述，本申請的其它特征、目的和優點將會變得更明顯：