[發(fā)明專(zhuān)利]服飾關(guān)鍵點(diǎn)定位方法、裝置、電子設(shè)備及計(jì)算機(jī)存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 202010310618.3
• 申請(qǐng)日: 2020-04-20
• 公開(kāi)（公告）號(hào): CN113538573B
• 公開(kāi)（公告）日: 2023-07-25
• 發(fā)明（設(shè)計(jì)）人: 何明;張李秋;李超;劉林海
• 申請(qǐng)（專(zhuān)利權(quán)）人: 中移（成都）信息通信科技有限公司;中國(guó)移動(dòng)通信集團(tuán)有限公司
• 主分類(lèi)號(hào): G06T7/73
• 分類(lèi)號(hào): G06T7/73;G06V10/764;G06V10/774;G06V10/80;G06V10/82;G06N3/082;G06N3/092;G06N3/0895;G06N3/0464;G06N3/084
• 代理公司: 北京東方億思知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11258
• 代理人: 彭瓊

本發(fā)明實(shí)施例提供了一種服飾關(guān)鍵點(diǎn)定位方法、裝置、電子設(shè)備及計(jì)算機(jī)存儲(chǔ)介質(zhì)。該服飾關(guān)鍵點(diǎn)定位方法，包括：獲取待服飾關(guān)鍵點(diǎn)定位的服飾圖像和服飾圖像對(duì)應(yīng)的熱力圖；將服飾圖像和服飾圖像對(duì)應(yīng)的熱力圖進(jìn)行特征融合，得到融合圖像；將融合圖像輸入預(yù)設(shè)的服飾關(guān)鍵點(diǎn)定位模型，輸出服飾圖像對(duì)應(yīng)的定位結(jié)果圖像；其中，服飾關(guān)鍵點(diǎn)定位模型是利用訓(xùn)練集對(duì)第一多域多任務(wù)網(wǎng)絡(luò)進(jìn)行模型訓(xùn)練得到的，訓(xùn)練集是基于樣本服飾圖像、樣本服飾圖像對(duì)應(yīng)的熱力圖進(jìn)行特征融合得到的，第一多域多任務(wù)網(wǎng)絡(luò)包括回歸任務(wù)網(wǎng)絡(luò)。根據(jù)本發(fā)明實(shí)施例的服飾關(guān)鍵點(diǎn)定位方法、裝置、電子設(shè)備及計(jì)算機(jī)存儲(chǔ)介質(zhì)，能夠更加準(zhǔn)確地進(jìn)行服飾關(guān)鍵點(diǎn)定位。

技術(shù)領(lǐng)域

本發(fā)明屬于人工智能技術(shù)領(lǐng)域，尤其涉及一種服飾關(guān)鍵點(diǎn)定位方法、裝置、電子設(shè)備及計(jì)算機(jī)存儲(chǔ)介質(zhì)。

背景技術(shù)

隨著人工智能技術(shù)的發(fā)展，其在傳統(tǒng)行業(yè)上的應(yīng)用也越發(fā)普遍。例如，人工智能技術(shù)中的深度學(xué)習(xí)技術(shù)已經(jīng)開(kāi)始滲透整個(gè)服飾行業(yè)了，對(duì)服飾設(shè)計(jì)、服飾試穿、服飾定制、服飾制作等方面都產(chǎn)生了巨大的改變，引領(lǐng)服飾產(chǎn)業(yè)轉(zhuǎn)型升級(jí)。為了提高消費(fèi)者對(duì)產(chǎn)品的滿(mǎn)意度，需對(duì)服飾的關(guān)鍵點(diǎn)(例如，圖1中的左領(lǐng)部1、右領(lǐng)部2等)進(jìn)行準(zhǔn)確的識(shí)別定位，才能接著完成設(shè)計(jì)、試穿、定制等功能。

目前，服飾關(guān)鍵點(diǎn)定位方法主要是采用訓(xùn)練好的深度學(xué)習(xí)網(wǎng)絡(luò)進(jìn)行識(shí)別定位。其中，在特征提取階段，常見(jiàn)的做法是采用圖像金字塔網(wǎng)絡(luò)的方式或者使用多組卷積神經(jīng)網(wǎng)絡(luò)的方法，這兩種方法的本質(zhì)上都是通過(guò)對(duì)原始圖像進(jìn)行多尺度像素的采樣后提取出特性信息。但是，這兩種方法僅從像素層面提取的特性信息的特征強(qiáng)度較弱，導(dǎo)致訓(xùn)練出的深度學(xué)習(xí)網(wǎng)絡(luò)對(duì)于服飾關(guān)鍵點(diǎn)定位不準(zhǔn)確。

因此，如何更加準(zhǔn)確地進(jìn)行服飾關(guān)鍵點(diǎn)定位是本領(lǐng)域技術(shù)人員亟需解決的技術(shù)問(wèn)題。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例提供一種服飾關(guān)鍵點(diǎn)定位方法、裝置、電子設(shè)備及計(jì)算機(jī)存儲(chǔ)介質(zhì)，能夠更加準(zhǔn)確地進(jìn)行服飾關(guān)鍵點(diǎn)定位。

第一方面，本發(fā)明實(shí)施例提供一種服飾關(guān)鍵點(diǎn)定位方法，該方法包括：

獲取待服飾關(guān)鍵點(diǎn)定位的服飾圖像和服飾圖像對(duì)應(yīng)的熱力圖；

將服飾圖像和服飾圖像對(duì)應(yīng)的熱力圖進(jìn)行特征融合，得到融合圖像；

將融合圖像輸入預(yù)設(shè)的服飾關(guān)鍵點(diǎn)定位模型，輸出服飾圖像對(duì)應(yīng)的定位結(jié)果圖像；

其中，服飾關(guān)鍵點(diǎn)定位模型是利用訓(xùn)練集對(duì)第一多域多任務(wù)網(wǎng)絡(luò)進(jìn)行模型訓(xùn)練得到的，訓(xùn)練集是基于樣本服飾圖像、樣本服飾圖像對(duì)應(yīng)的熱力圖進(jìn)行特征融合得到的，第一多域多任務(wù)網(wǎng)絡(luò)包括回歸任務(wù)網(wǎng)絡(luò)。

可選地，在將融合圖像輸入預(yù)設(shè)的服飾關(guān)鍵點(diǎn)定位模型，輸出服飾圖像對(duì)應(yīng)的定位結(jié)果圖像之前，該方法還包括：

采用自適應(yīng)漸進(jìn)式剪枝的方式，對(duì)第一多域多任務(wù)網(wǎng)絡(luò)進(jìn)行權(quán)重剪裁，得到第二多域多任務(wù)網(wǎng)絡(luò)；其中，第二多域多任務(wù)網(wǎng)絡(luò)的權(quán)重稀疏度達(dá)到預(yù)設(shè)的權(quán)重稀疏度閾值；

將第二多域多任務(wù)網(wǎng)絡(luò)確定為第一多域多任務(wù)網(wǎng)絡(luò)；

利用訓(xùn)練集對(duì)第一多域多任務(wù)網(wǎng)絡(luò)進(jìn)行模型訓(xùn)練，得到服飾關(guān)鍵點(diǎn)定位模型。

可選地，在將融合圖像輸入預(yù)設(shè)的服飾關(guān)鍵點(diǎn)定位模型，輸出服飾圖像對(duì)應(yīng)的定位結(jié)果圖像之前，該方法還包括：

基于預(yù)設(shè)的位寬分配策略信息，調(diào)整第一多域多任務(wù)網(wǎng)絡(luò)中每一層的位寬，得到第三多域多任務(wù)網(wǎng)絡(luò)；其中，位寬包括權(quán)重的位寬和激活的位寬；

將第三多域多任務(wù)網(wǎng)絡(luò)確定為第一多域多任務(wù)網(wǎng)絡(luò)；

利用訓(xùn)練集對(duì)第一多域多任務(wù)網(wǎng)絡(luò)進(jìn)行模型訓(xùn)練，得到服飾關(guān)鍵點(diǎn)定位模型。

可選地，在基于預(yù)設(shè)的位寬分配策略信息，調(diào)整第一多域多任務(wù)網(wǎng)絡(luò)中每一層的位寬，得到第三多域多任務(wù)網(wǎng)絡(luò)之前，該方法還包括：