[發(fā)明專利]基于2D圖像的虛擬試衣方法及裝置

在審

• 申請?zhí)枺?/td>: 202011116383.0
• 申請日: 2020-10-19
• 公開（公告）號: CN112258269A
• 公開（公告）日: 2021-01-22
• 發(fā)明（設計）人: 彭濤;常源;劉軍平;胡新榮;何儒漢;張俊杰;張自力;姜明華
• 申請（專利權）人: 武漢紡織大學
• 主分類號: G06Q30/06
• 分類號: G06Q30/06;G06N3/04;G06T5/50;G06K9/34
• 代理公司: 上海碩力知識產(chǎn)權代理事務所(普通合伙) 31251
• 代理人: 童素珠

本發(fā)明提供了一種基于2D圖像的虛擬試衣方法及裝置，包括：獲取參考人圖像和目標衣服圖像；根據(jù)由參考人圖像中提取的粗糙身體形狀圖、姿勢圖及非試穿區(qū)域細節(jié)圖合成參考人表示圖；根據(jù)參考人表示圖對目標衣服圖像的像素進行扭曲得到第一扭曲衣服圖像，及對目標衣服圖像的特征進行扭曲得到第二扭曲衣服圖像和預測扭曲衣服合成掩碼；基于扭曲衣服合成掩碼對第一扭曲衣服圖像和第二扭曲衣服圖像進行合成得到最終扭曲衣服圖像；分別提取參考人表示圖和最終扭曲衣服圖像的特征得到初步試穿合成圖像及預測試穿圖像合成掩碼；根據(jù)試穿圖像合成掩碼合成初步試穿合成圖像和最終扭曲衣服圖像得到最終的試穿合成圖像，完成試衣，大大提升了試衣效果的真實性。

技術領域

本發(fā)明涉及計算機與網(wǎng)絡技術領域，尤指一種虛擬試衣方法及裝置。

背景技術

隨著計算機技術和在線購物平臺的發(fā)展，在線服裝購物出現(xiàn)了顯著的增長，與傳統(tǒng)購物相比，在線購物具有方便快捷等諸多優(yōu)勢，但由于不能像實體店服裝購物一樣可以實時試穿、檢查服裝后再購買等，有些人依然會為了避免反復退貨選擇在實體店購買服裝，可見創(chuàng)建一個接近現(xiàn)實的交互式購物環(huán)境越來越重要，虛擬試衣也由此引起了廣泛的關注。

早期主要是基于3D的方法實現(xiàn)虛擬試衣，但是3D方法需要依賴計算機圖像學來構建3D模塊并渲染試穿圖像，且3D數(shù)據(jù)獲取難度較大，需要花費大量的人力物力財力，大大限制了虛擬試穿在實際中的應用。近期有技術人員提出了基于圖像的視覺試穿，試圖將虛擬試穿轉(zhuǎn)換為條件圖像生成問題，并顯示出令人鼓舞的結(jié)果。目前，國內(nèi)外很多機構都在做相關研究，但是使用的方法在對衣服進行扭曲時都會出現(xiàn)形狀畸變和紋理失真，導致最終合成的試穿圖像出現(xiàn)不自然不真實等情況；另外，在試穿合成時沒有使用完整的非試穿衣服區(qū)域細節(jié)，導致試穿圖像中不能完全保留參考人的身份細節(jié)；再有，通常先使用一個標準的編碼器提取目標衣服細節(jié)和非試穿衣服區(qū)域的細節(jié)，之后再通過一個解碼器解碼的方式形成試穿圖像，導致生成失真的試穿圖像，尤其是當參考人存在復雜姿勢和手臂遮擋時這種現(xiàn)象更為嚴重。

發(fā)明內(nèi)容

本發(fā)明的目的是提供一種基于2D圖像的虛擬試衣方法及裝置，有效解決現(xiàn)有虛擬試衣中合成的試穿圖像出現(xiàn)不自然不真實、失真等情況。

本發(fā)明提供的技術方案如下：

一種基于2D圖像的虛擬試衣方法，包括：

獲取參考人圖像和目標衣服圖像；

根據(jù)由所述參考人圖像中提取的粗糙身體形狀圖、姿勢圖及非試穿區(qū)域細節(jié)圖合成參考人表示圖；

根據(jù)所述參考人表示圖對目標衣服圖像的像素進行扭曲得到第一扭曲衣服圖像，及對所述目標衣服圖像的特征進行扭曲得到第二扭曲衣服圖像和預測扭曲衣服合成掩碼；

基于所述扭曲衣服合成掩碼對第一扭曲衣服圖像和第二扭曲衣服圖像進行合成得到最終扭曲衣服圖像；

分別提取所述參考人表示圖和最終扭曲衣服圖像的特征得到初步試穿合成圖像及預測試穿圖像合成掩碼；

根據(jù)所述試穿圖像合成掩碼合成初步試穿合成圖像和最終扭曲衣服圖像得到最終的試穿合成圖像，完成基于2D圖像的虛擬試衣。

本發(fā)明還提供了一種終端設備，包括存儲器、處理器以及存儲在所述存儲器中并可在所述處理器上運行的計算機程序，所述處理器運行所述計算機程序時實現(xiàn)上述基于2D圖像的虛擬試衣方法的步驟。

本發(fā)明還提供了一種計算機可讀存儲介質(zhì)，所述計算機可讀存儲介質(zhì)存儲有計算機程序，所述計算機程序被處理器執(zhí)行時實現(xiàn)上述基于2D圖像的虛擬試衣方法的步驟。

本發(fā)明還提供了一種基于2D圖像的虛擬試衣裝置，包括：

圖像獲取模塊，用于獲取參考人圖像和目標衣服圖像；