[發(fā)明專利]一種服飾識別方法、裝置、終端及存儲介質

在審

• 申請?zhí)枺?/td>: 202210356711.7
• 申請日: 2022-04-06
• 公開（公告）號: CN114863405A
• 公開（公告）日: 2022-08-05
• 發(fā)明（設計）人: 李冠楠
• 申請（專利權）人: 北京愛奇藝科技有限公司
• 主分類號: G06V20/60
• 分類號: G06V20/60;G06V20/40;G06V10/80;G06V10/762;G06V10/74;G06V10/42;G06V10/82;G06N3/04;G06N3/08
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 呂俊秀

1.一種服飾識別方法，其特征在于，所述方法包括：

獲取多張包含不同服飾視角的服飾圖像；多張所述服飾圖像中待識別的目標服飾為相同的服飾款式；

對每張所述服飾圖像進行服飾視角識別，確定所述服飾圖像中待識別的目標服飾對應的服飾視角；

對每張所述服飾圖像進行特征提取，得到第一服飾特征；

融合多張所述服飾圖像對應的第一服飾特征和服飾視角，得到所述待識別的目標服飾對應的多視角服飾特征，以基于所述多視角服飾特征得到所述待識別的目標服飾的識別結果。

2.根據(jù)權利要求1所述的方法，其特征在于，所述對每張所述服飾圖像進行特征提取，得到第一服飾特征，包括：

對所述服飾圖像進行人體關鍵點檢測和服飾關鍵點檢測，以得到所述服飾圖像對應的人體關鍵點和服飾關鍵點；

對所述服飾圖像進行全局特征提取，得到所述服飾圖像對應的全局特征；所述全局特征用于表征所述服飾圖像中待識別的目標服飾的款式；

根據(jù)所述人體關鍵點和服飾關鍵點對所述全局特征進行處理，得到所述服飾圖像的第一服飾特征。

3.根據(jù)權利要求1所述的方法，其特征在于，所述融合多張所述服飾圖像對應的第一服飾特征和服飾視角，得到所述待識別的目標服飾對應的多視角服飾特征，包括：

將多張所述服飾圖像對應的第一服飾特征組成的特征序列，以及多張所述服飾圖像的服飾視角對應的視角編碼組成的視角編碼序列，輸入預先訓練好的變換器結構，由所述變換器結構對所述特征序列和所述視角編碼序列進行融合，輸出所述待識別的目標服飾對應的多視角服飾特征。

4.根據(jù)權利要求1所述的方法，其特征在于，所述對每張所述服飾圖像進行服飾視角識別，確定所述服飾圖像中待識別的目標服飾對應的服飾視角，包括：

檢測所述服飾圖像中待識別的目標服飾的姿態(tài)信息；

將所述姿態(tài)信息對應的視角確定為所述服飾圖像中待識別的目標服飾對應的服飾視角。

5.根據(jù)權利要求1所述的方法，其特征在于，所述對每張所述服飾圖像進行服飾視角識別，確定所述服飾圖像中待識別的目標服飾對應的服飾視角，包括：

將所述服飾圖像輸入到視角識別模型，由所述視角識別模型輸出所述服飾圖像中待識別的目標服飾對應的服飾視角；其中，所述視角識別模型是使用第一訓練樣本對初始視角識別模型進行訓練得到的，所述第一訓練樣本是標注出包含的第一訓練服飾的服飾視角的圖像。

6.根據(jù)權利要求1所述的方法，其特征在于，所述獲取多張不同服飾視角的服飾圖像，包括：

從待識別視頻中提取多個不同時刻的待識別幀圖像；

檢測所述待識別幀圖像中的服飾區(qū)域，并提取所述服飾區(qū)域的圖像特征；

基于各個所述待識別幀圖像對應的圖像特征，對多個所述待識別幀圖像進行聚類；

將聚類后得到的、屬于同一類的多個待識別幀圖像作為所述服飾圖像。

7.根據(jù)權利要求1所述的方法，其特征在于，所述基于所述多視角服飾特征得到所述待識別的目標服飾的識別結果，包括：

計算所述多視角服飾特征與數(shù)據(jù)庫中的各個預設多視角服飾特征之間的相似度；

確定滿足預設要求的相似度對應的目標預設多視角服飾特征，并將所述目標預設多視角服飾特征對應的服飾信息作為所述待識別的目標服飾的識別結果。

8.一種服飾識別裝置，其特征在于，所述裝置包括：

第一獲取模塊，用于獲取多張包含不同服飾視角的服飾圖像；多張所述服飾圖像中待識別的目標服飾為相同的服飾款式；

視角識別模塊，用于對每張所述服飾圖像進行服飾視角識別，確定所述服飾圖像中待識別的目標服飾對應的服飾視角；

特征提取模塊，用于對每張所述服飾圖像進行特征提取，得到第一服飾特征；

多視角識別模塊，用于融合多張所述服飾圖像對應的第一服飾特征和服飾視角，得到所述待識別的目標服飾對應的多視角服飾特征，以基于所述多視角服飾特征得到所述待識別的目標服飾的識別結果。