[發(fā)明專利]虛擬試衣方法及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 202110146096.2
• 申請(qǐng)日: 2021-02-02
• 公開（公告）號(hào): CN112884638A
• 公開（公告）日: 2021-06-01
• 發(fā)明（設(shè)計(jì)）人: 李晶;左宗英;武嫣
• 申請(qǐng)（專利權(quán)）人: 北京東方國(guó)信科技股份有限公司
• 主分類號(hào): G06T3/00
• 分類號(hào): G06T3/00;G06K9/62
• 代理公司: 北京路浩知識(shí)產(chǎn)權(quán)代理有限公司 11002
• 代理人: 鄭朝然

本發(fā)明提供一種虛擬試衣方法及裝置，其方法包括：根據(jù)待試衣對(duì)象原始視角的原始圖像，獲取待試衣對(duì)象的三維模型，并基于待試衣對(duì)象的三維模型，獲取待試衣對(duì)象多個(gè)目標(biāo)視角的模型圖像；根據(jù)原始圖像，分別對(duì)每一模型圖像進(jìn)行細(xì)節(jié)補(bǔ)充，獲得待試衣對(duì)象多個(gè)目標(biāo)視角的補(bǔ)全圖像；對(duì)于每一目標(biāo)視角，將每一目標(biāo)視角的補(bǔ)全圖像和每一目標(biāo)視角的待試衣物圖像輸入虛擬試衣模型，獲取待試衣對(duì)象每一目標(biāo)視角的虛擬試衣效果圖像。本發(fā)明提供的虛擬試衣方法及裝置，能基于一張待試衣對(duì)象的原始圖像，獲取待試衣對(duì)象多個(gè)目標(biāo)視角的虛擬試衣效果圖，能快速、低成本以及全面的展示待試衣對(duì)象的試衣效果，能實(shí)現(xiàn)更簡(jiǎn)單的多視角虛擬試衣。

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)技術(shù)領(lǐng)域，尤其涉及一種虛擬試衣方法及裝置。

背景技術(shù)

虛擬試衣是指不需要用戶真正換裝，而是通過(guò)計(jì)算機(jī)視覺(jué)技術(shù)就能生成參考人像在指定姿態(tài)下試穿指定衣服的圖像，實(shí)現(xiàn)用戶虛擬試穿衣服效果。虛擬試衣技術(shù)的出現(xiàn)給用戶提供了方便快捷的試衣體驗(yàn)，使得人們的傳統(tǒng)試衣方式發(fā)生了極大的變化，用戶無(wú)需真正換裝就可以體驗(yàn)到潮流與時(shí)尚，可以幫助提高用戶挑選與購(gòu)買服裝的效率，提高用戶的購(gòu)物體驗(yàn)。

現(xiàn)有技術(shù)中，通過(guò)基于深度學(xué)習(xí)的神經(jīng)網(wǎng)絡(luò)模型，可以將一張圖片中的服裝，渲染至一張待試衣對(duì)象的圖片上，從而實(shí)現(xiàn)對(duì)待試衣對(duì)象的虛擬試衣。但是，僅通過(guò)待試衣對(duì)象單一視角的試衣效果圖難以體現(xiàn)待試衣對(duì)象虛擬試衣時(shí)的臨場(chǎng)感和真實(shí)感，且難以貼近實(shí)際試穿衣服的效果。若想要通過(guò)現(xiàn)有技術(shù)獲取待試衣對(duì)象更多視角的虛擬試衣效果圖，則需要獲取待試衣對(duì)象多個(gè)視角的圖片，并分別將對(duì)應(yīng)視角的服裝渲染至每一張待試衣對(duì)象的圖片上，從而可以獲取待試衣對(duì)象多個(gè)視角的虛擬試衣效果圖，多視角的虛擬試衣過(guò)程較繁瑣。

發(fā)明內(nèi)容

本發(fā)明提供一種虛擬試衣方法及裝置用以解決現(xiàn)有技術(shù)中多視角的虛擬試衣過(guò)程較繁瑣的缺陷，實(shí)現(xiàn)更簡(jiǎn)單的多視角虛擬試衣。

本發(fā)明提供一種虛擬試衣方法，包括：根據(jù)待試衣對(duì)象原始視角的原始圖像，獲取所述待試衣對(duì)象的三維模型，并基于所述待試衣對(duì)象的三維模型，獲取所述待試衣對(duì)象多個(gè)目標(biāo)視角的模型圖像；

根據(jù)所述原始圖像，分別對(duì)每一所述模型圖像進(jìn)行細(xì)節(jié)補(bǔ)充，獲得所述待試衣對(duì)象所述多個(gè)目標(biāo)視角的補(bǔ)全圖像；

對(duì)于每一目標(biāo)視角，將所述每一目標(biāo)視角的所述補(bǔ)全圖像和所述每一目標(biāo)視角的待試衣物圖像輸入虛擬試衣模型，獲取所述待試衣對(duì)象所述每一目標(biāo)視角的虛擬試衣效果圖像；

其中，所述虛擬試衣模型是基于多個(gè)樣本圖像組及所述樣本圖像組對(duì)應(yīng)的標(biāo)簽進(jìn)行訓(xùn)練后得到的；每一所述樣本圖像組包括第一人物樣本訓(xùn)練視角的圖像和衣物樣本所述訓(xùn)練視角的圖像；所述樣本圖像組對(duì)應(yīng)的標(biāo)簽為所述第一人物樣本試穿所述衣物樣本所述訓(xùn)練視角的圖像。

根據(jù)本發(fā)明提供的一種虛擬試衣方法，所述根據(jù)所述原始圖像，分別對(duì)每一所述模型圖像進(jìn)行細(xì)節(jié)補(bǔ)充，獲得所述待試衣對(duì)象所述多個(gè)目標(biāo)視角的補(bǔ)全圖像，具體包括：

對(duì)于每一目標(biāo)視角，將所述原始圖像和所述每一目標(biāo)視角的模型圖像輸入細(xì)節(jié)補(bǔ)充模型，獲取所述待試衣對(duì)象所述每一目標(biāo)視角的補(bǔ)全圖像；

其中，所述細(xì)節(jié)補(bǔ)充模型是基于第二人物樣本所述原始視角的圖像及預(yù)先獲取的所述第二人物樣本的圖像對(duì)應(yīng)的標(biāo)簽進(jìn)行訓(xùn)練后得到的。

根據(jù)本發(fā)明提供的一種虛擬試衣方法，所述對(duì)于每一目標(biāo)視角，將所述原始圖像和所述每一目標(biāo)視角的模型圖像輸入細(xì)節(jié)補(bǔ)充模型，獲得所述待試衣對(duì)象所述每一目標(biāo)視角的補(bǔ)全圖像，具體包括：

對(duì)于每一目標(biāo)視角，將所述原始圖像分別輸入所述細(xì)節(jié)補(bǔ)充模型中的第一特征提取子模型和第二特征提取子模型，獲取所述原始圖像的全局原始特征和區(qū)域原始特征，并將所述每一目標(biāo)視角的所述模型圖像分別輸入所述第一特征提取子模型和所述第二特征提取子模型，獲取所述每一目標(biāo)視角的所述模型圖像的全局模型特征和區(qū)域模型特征；