[發(fā)明專利]虛擬換服飾的方法和裝置、設(shè)備和介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010587335.3
• 申請(qǐng)日: 2020-06-24
• 公開（公告）號(hào): CN111754303A
• 公開（公告）日: 2020-10-09
• 發(fā)明（設(shè)計(jì)）人: 盧藝帆
• 申請(qǐng)（專利權(quán)）人: 北京字節(jié)跳動(dòng)網(wǎng)絡(luò)技術(shù)有限公司
• 主分類號(hào): G06Q30/06
• 分類號(hào): G06Q30/06;G06T19/20;G06T17/00
• 代理公司: 北京衛(wèi)智暢科專利代理事務(wù)所(普通合伙) 11557
• 代理人: 陳佳

1.一種虛擬換服飾的方法，包括：

從顯示有腳部的目標(biāo)圖像中提取腳部圖像；

基于所述腳部圖像，生成腳部姿態(tài)信息；

基于所述腳部姿態(tài)信息，給所述目標(biāo)圖像中顯示的腳部疊加上服飾的圖案。

2.根據(jù)權(quán)利要求1所述的方法，其中，所述從顯示有腳部的目標(biāo)圖像中提取腳部圖像，包括：

將所述目標(biāo)圖像輸入至預(yù)先訓(xùn)練的目標(biāo)檢測(cè)網(wǎng)絡(luò)，得到第一矩形框；

基于所述第一矩形框的中心點(diǎn)，對(duì)所述第一矩形框進(jìn)行外擴(kuò)，得到第二矩形框；

從所述目標(biāo)圖像中裁剪出所述第二矩形框所對(duì)應(yīng)的圖像作為所述腳部圖像。

3.根據(jù)權(quán)利要求1所述的方法，其中，所述基于所述腳部圖像，生成腳部姿態(tài)信息，包括：

將所述腳部圖像輸入至預(yù)先訓(xùn)練的腳部姿態(tài)估計(jì)網(wǎng)絡(luò)，得到腳部姿態(tài)信息，其中，所述腳部姿態(tài)信息包括：所述腳部圖像中所述腳部所在位置相對(duì)于初始腳三維模型所在位置的四元數(shù)、所述腳部圖像中所述腳部所在位置相對(duì)于初始腳三維模型所在位置的平移信息和所述腳部圖像中左右腳信息。

4.根據(jù)權(quán)利要求3所述的方法，其中，所述基于所述腳部姿態(tài)信息，給所述目標(biāo)圖像中顯示的腳部疊加上服飾的圖案，包括：

獲取與所述初始腳三維模型相適配的服飾三維模型；

基于所述腳部姿態(tài)信息，利用3D引擎對(duì)所述服飾三維模型進(jìn)行三維變換，將所述腳部圖像中顯示的腳部所在位置的圖像疊加上所述服飾三維模型的圖像，得到疊加后的腳部圖像；

根據(jù)所述疊加后的腳部圖像，得到渲染后的目標(biāo)圖像。

5.根據(jù)權(quán)利要求2所述的方法，其中，所述目標(biāo)檢測(cè)網(wǎng)絡(luò)是以下之一：

Fast R-CNN算法網(wǎng)絡(luò)，F(xiàn)aster R-CNN算法網(wǎng)絡(luò)，YOLO系列算法網(wǎng)絡(luò)，SSD算法網(wǎng)絡(luò)。

6.一種虛擬換服飾的裝置，包括：

提取單元，被配置成從顯示有腳部的目標(biāo)圖像中提取腳部圖像；

生成單元，被配置成基于所述腳部圖像，生成腳部姿態(tài)信息；

疊加單元，被配置成基于所述腳部姿態(tài)信息，給所述目標(biāo)圖像中顯示的腳部疊加上服飾的圖案。

7.一種電子設(shè)備，包括：

一個(gè)或多個(gè)處理器；

存儲(chǔ)裝置，用于存儲(chǔ)一個(gè)或多個(gè)程序；

當(dāng)所述一個(gè)或多個(gè)程序被所述一個(gè)或多個(gè)處理器執(zhí)行時(shí)，使得所述一個(gè)或多個(gè)處理器實(shí)現(xiàn)如權(quán)利要求1-6中任一所述的方法。

8.一種計(jì)算機(jī)可讀介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，其中，所述程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1-6中任一所述的方法。