[發(fā)明專利]一種神經(jīng)網(wǎng)絡(luò)的訓(xùn)練方法及圖像匹配方法、裝置

有效

• 申請?zhí)枺?/td>: 201811535420.4
• 申請日: 2018-12-14
• 公開（公告）號: CN109670591B
• 公開（公告）日: 2022-09-27
• 發(fā)明（設(shè)計）人: 葛玉瑩;吳凌云;張瑞茂;羅平
• 申請（專利權(quán)）人: 深圳市商湯科技有限公司
• 主分類號: G06N3/08
• 分類號: G06N3/08;G06V10/74;G06V10/44;G06V10/82
• 代理公司: 北京派特恩知識產(chǎn)權(quán)代理有限公司 11270
• 代理人: 蔣雅潔;張穎玲

1.一種神經(jīng)網(wǎng)絡(luò)的訓(xùn)練方法，其特征在于，所述方法包括：

標(biāo)注第一服裝實例和第二服裝實例的注釋信息，所述第一服裝實例和第二服裝實例分別來源于第一服裝圖像和第二服裝圖像；

所述注釋信息包括：服裝邊界框、服裝類別、關(guān)鍵點、服裝輪廓線以及分割掩碼注釋；

所述注釋信息還包括以下至少之一：

遮擋，所述遮擋表征服裝實例標(biāo)注出的關(guān)鍵點中遮擋點所占的比例；

尺寸，所述尺寸表征服裝實例占據(jù)服裝圖像的比例；

聚焦，所述聚焦表征服裝實例標(biāo)注出的關(guān)鍵點中超出服裝圖像范圍的關(guān)鍵點的比例；

視角，所述視角表征服裝實例的展示角度；

響應(yīng)于所述第一服裝實例和所述第二服裝實例匹配的情況，將所述第一服裝圖像和所述第二服裝圖像進行配對；

基于配對的所述第一服裝圖像和所述第二服裝圖像對待訓(xùn)練的神經(jīng)網(wǎng)絡(luò)進行訓(xùn)練。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法，還包括：

分別獲取所述第一服裝實例和所述第二服裝實例的服裝類別；

基于所述服裝類別的標(biāo)注規(guī)則分別標(biāo)注出所述第一服裝實例和所述第二服裝實例的對應(yīng)關(guān)鍵點。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，分別標(biāo)注所述第一服裝實例和所述第二服裝實例的服裝類別和關(guān)鍵點之后，還包括：

標(biāo)注出每個所述關(guān)鍵點的屬性信息，所述屬性信息用于表明所述關(guān)鍵點是屬于可見點還是屬于遮擋點。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述標(biāo)注第一服裝實例和第二服裝實例的注釋信息，還包括：

分別標(biāo)注出所述第一服裝實例和所述第二服裝實例的邊緣點和交界點，其中，所述邊緣點是指所述服裝實例處于服裝圖像邊界上的點，所述交界點是指所述第一服裝實例或者所述第二服裝實例與其他服裝實例相交界的地方用于繪制服裝輪廓線的點。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述方法，還包括：

分別基于所述第一服裝實例和第二服裝實例的關(guān)鍵點、每個關(guān)鍵點的屬性信息、邊緣點和交界點，分別繪制所述第一服裝實例和所述第二服裝實例的服裝輪廓線。

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述方法，還包括：

基于所述第一服裝實例和所述第二服裝實例的服裝輪廓線分別生成相應(yīng)的初步的分割掩碼圖；

對所述初步的分割掩碼圖進行修正，得到所述分割掩碼注釋。

7.根據(jù)權(quán)利要求1至6任一項所述的方法，其特征在于，所述將所述第一服裝圖像和所述第二服裝圖像進行配對包括：為所述第一服裝實例和所述第二服裝實例配置相同的商品標(biāo)識。

8.一種圖像匹配方法，其特征在于，所述方法包括：

接收待匹配的第三服裝圖像；

從所述第三服裝圖像中提取出第三服裝實例；

獲取所述第三服裝實例的注釋信息；所述注釋信息包括：服裝邊界框、服裝類別、關(guān)鍵點、服裝輪廓線以及分割掩碼注釋；

所述注釋信息還包括以下至少之一：

遮擋，所述遮擋表征服裝實例標(biāo)注出的關(guān)鍵點中遮擋點所占的比例；

尺寸，所述尺寸表征服裝實例占據(jù)服裝圖像的比例；

聚焦，所述聚焦表征服裝實例標(biāo)注出的關(guān)鍵點中超出服裝圖像范圍的關(guān)鍵點的比例；

視角，所述視角表征服裝實例的展示角度；

基于所述第三服裝實例的注釋信息查詢匹配的第四服裝實例。

9.根據(jù)權(quán)利要求8所述的方法，其特征在于，所述從所述第三服裝圖像中提取出第三服裝實例之前，還包括：

對所述第三服裝圖像進行特征提取。