[發(fā)明專利]模型的陰影生成方法、裝置、設(shè)備、介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 202211305359.0
• 申請(qǐng)日: 2022-10-24
• 公開(kāi)（公告）號(hào): CN115375828B
• 公開(kāi)（公告）日: 2023-02-03
• 發(fā)明（設(shè)計(jì)）人: 徐東
• 申請(qǐng)（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號(hào): G06T15/60
• 分類號(hào): G06T15/60;G06T15/02;G06T15/04;A63F13/60
• 代理公司: 北京三高永信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11138
• 代理人: 徐耿銘

1.一種模型的陰影生成方法，其特征在于，所述方法包括：

獲取目標(biāo)三維模型對(duì)應(yīng)的二值圖像和虛擬場(chǎng)景對(duì)應(yīng)的環(huán)境光照貼圖，所述二值圖像是所述目標(biāo)三維模型映射至二維平面上并對(duì)所述二維平面上的圖像前景和背景進(jìn)行區(qū)分的圖像，所述環(huán)境光照貼圖用于指示虛擬光源在所述虛擬場(chǎng)景中對(duì)三維實(shí)體的全局共享光照效果，其中，所述全局共享光照效果用于指示所述虛擬光源對(duì)所述虛擬場(chǎng)景中各個(gè)位置的光照情況，或者，所述全局共享光照效果用于指示所述虛擬光源對(duì)所述虛擬場(chǎng)景中指定位置對(duì)應(yīng)的位置范圍內(nèi)的光照情況；

對(duì)所述二值圖像和所述環(huán)境光照貼圖進(jìn)行特征空間壓縮和特征連接，將所述環(huán)境光照貼圖所表征的所述全局共享光照效果映射至所述二值圖像，得到中間特征表示；

對(duì)所述中間特征表示進(jìn)行上采樣和特征空間解壓縮，得到陰影圖像；

在所述虛擬場(chǎng)景中通過(guò)所述陰影圖像生成所述目標(biāo)三維模型的陰影效果。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)所述二值圖像和所述環(huán)境光照貼圖進(jìn)行特征空間壓縮和特征連接，將所述環(huán)境光照貼圖所表征的所述全局共享光照效果映射至所述二值圖像，得到中間特征表示，包括：

對(duì)所述二值圖像和所述環(huán)境光照貼圖進(jìn)行卷積處理，得到第一特征表示；

對(duì)所述第一特征表示進(jìn)行池化處理，得到第二特征表示；

對(duì)所述第二特征表示進(jìn)行卷積處理，得到所述中間特征表示。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)所述中間特征表示進(jìn)行上采樣和特征空間解壓縮，得到陰影圖像，包括：

對(duì)所述中間特征表示進(jìn)行上卷積處理，得到第三特征表示；

通過(guò)激活函數(shù)對(duì)所述第三特征表示進(jìn)行線性變換，得到第四特征表示；

對(duì)所述第四特征表示進(jìn)行上采樣處理，得到所述陰影圖像。

4.根據(jù)權(quán)利要求1至3任一所述的方法，其特征在于，所述陰影圖像是通過(guò)將所述二值圖像和所述環(huán)境光照貼圖輸入至目標(biāo)陰影生成模型中預(yù)測(cè)得到的圖像，所述目標(biāo)陰影生成模型由陰影生成模型訓(xùn)練得到；

所述陰影生成模型的訓(xùn)練過(guò)程包括：

獲取樣本三維模型對(duì)應(yīng)的樣本二值圖、樣本環(huán)境光照貼圖以及樣本陰影圖像，所述樣本陰影圖像是所述樣本三維模型在所述樣本環(huán)境光照貼圖對(duì)應(yīng)的光照效果下的陰影效果；

將所述樣本二值圖和所述樣本環(huán)境光照貼圖輸入至所述陰影生成模型，預(yù)測(cè)得到預(yù)測(cè)陰影圖像；

基于所述預(yù)測(cè)陰影圖像和所述樣本陰影圖像之間的差異，對(duì)所述陰影生成模型進(jìn)行迭代訓(xùn)練，得到目標(biāo)陰影生成模型。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述方法還包括：

獲取所述樣本三維模型對(duì)應(yīng)的輪廓陰影，所述輪廓陰影是具有所述樣本三維模型的完整輪廓的陰影；

將所述輪廓陰影和所述樣本環(huán)境光照貼圖進(jìn)行動(dòng)態(tài)近似處理，得到所述樣本陰影圖像。

6.根據(jù)權(quán)利要求1至3任一所述的方法，其特征在于，所述方法還包括：

獲取所述目標(biāo)三維模型對(duì)應(yīng)的遮擋映射圖，所述遮擋映射圖用于指示所述目標(biāo)三維模型對(duì)應(yīng)的陰影被所述虛擬場(chǎng)景中場(chǎng)景對(duì)象的遮擋情況；

將所述遮擋映射圖、所述二值圖像和所述環(huán)境光照貼圖輸入至目標(biāo)陰影生成模型，輸出得到所述陰影圖像。

7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述獲取所述目標(biāo)三維模型對(duì)應(yīng)的遮擋映射圖，包括：

將所述二值圖像輸入至目標(biāo)遮擋預(yù)測(cè)模型，輸出得到所述遮擋映射圖，所述目標(biāo)遮擋預(yù)測(cè)模型用于預(yù)測(cè)所述目標(biāo)三維模型的陰影在所述虛擬場(chǎng)景中被所述場(chǎng)景對(duì)象的遮擋情況。

8.根據(jù)權(quán)利要求7所述的方法，其特征在于，所述目標(biāo)遮擋預(yù)測(cè)模型是由遮擋預(yù)測(cè)模型訓(xùn)練得到的，所述遮擋預(yù)測(cè)模型的訓(xùn)練過(guò)程包括：

獲取樣本三維模型對(duì)應(yīng)的樣本二值圖和樣本遮擋映射圖；

將所述樣本二值圖輸入至所述遮擋預(yù)測(cè)模型，輸出預(yù)測(cè)遮擋映射圖；

基于所述預(yù)測(cè)遮擋映射圖和所述樣本遮擋映射圖之間的差異對(duì)所述遮擋預(yù)測(cè)模型進(jìn)行迭代訓(xùn)練，得到所述目標(biāo)遮擋預(yù)測(cè)模型。