[發明專利]服飾關鍵點的檢測方法和裝置、電子設備、存儲介質和程序

有效

• 申請號: 201710562574.1
• 申請日: 2017-07-11
• 公開（公告）號: CN108229496B
• 公開（公告）日: 2021-07-06
• 發明（設計）人: 顏思捷;劉子緯;羅平;王曉剛;湯曉鷗
• 申請（專利權）人: 北京市商湯科技開發有限公司
• 主分類號: G06K9/46
• 分類號: G06K9/46;G06N3/08;G06T7/33;G06T7/60
• 代理公司: 北京思源智匯知識產權代理有限公司 11657
• 代理人: 毛麗琴

本發明實施例公開了一種服飾關鍵點的檢測方法和裝置、電子設備、存儲介質和程序，其中，方法包括：分別通過多組卷積神經網絡對圖像進行特征提取，獲得多組特征；其中，所述多組卷積神經網絡中各組卷積神經網絡的卷積核大小不同；基于所述多組特征對所述圖像進行服飾關鍵點檢測。本發明實施例可以有效應用于各種不同尺度服飾的關鍵點檢測，解決服飾圖像中由于拍攝角度、人體姿勢、服裝款式、放置方式的繁復變化造成的尺度變化問題，降低關鍵點檢測的難度，提高關鍵點檢測的準確度。

技術領域

本發明涉及計算機視覺技術，尤其是一種服飾關鍵點的檢測方法和裝置、電子設備、存儲介質和程序。

背景技術

服飾識別是圖像檢索領域最重要也是最有挑戰性的問題之一。在當今互聯網上，多數用戶搜索與網上購物內容與服飾相關。因此，服飾識別是解決同款檢索、風格識別以及穿搭推薦需求中的關鍵問題。然而，服飾識別具有很高的難度，一是由于服飾的形變非常大，服飾本身是柔性很大的物體，在服裝款式、人體姿勢、放置方式不同時，服飾將呈現不同的狀態；二是在不同條件、拍攝角度下拍出的服飾圖片差距也非常大，例如模特的擺拍照和消費者的自拍照差別就很明顯。

服飾的關鍵點檢測是計算機視覺技術中理解服飾圖像需要解決的重要問題。隨著人工智能及互聯網的發展，服飾關鍵點檢測在網絡購物、智能穿搭、服裝設計等領域有著重要應用。

發明內容

本發明實施例提供一種服飾關鍵點檢測技術方案。

根據本發明實施例的一個方面，提供的一種服飾關鍵點的檢測方法，包括：

分別通過多組卷積神經網絡對圖像進行特征提取，獲得多組特征；其中，所述多組卷積神經網絡中各組卷積神經網絡的卷積核大小不同；

基于所述多組特征對所述圖像進行服飾關鍵點檢測。

根據本發明實施例的另一個方面，提供的一種服飾關鍵點的檢測裝置，包括：

多組卷積神經網絡，用于分別對圖像進行特征提取，獲得多組特征；其中，所述多組卷積神經網絡中各組卷積神經網絡的卷積核大小不同；

關鍵點檢測模塊，用于基于所述多組特征對所述圖像進行服飾關鍵點檢測。

根據本發明實施例的又一個方面，提供的一種計算設備，包括：

本發明上述任一實施例所述的服飾關鍵點的檢測裝置；和

檢索單元，用于根據所述服飾關鍵點的檢測裝置輸出的服飾的識別結果，檢索與所述服飾的款式相同的服飾相關信息。

根據本發明實施例的又一個方面，提供的另一種計算設備，包括：

本發明上述任一實施例所述的服飾關鍵點的檢測裝置；和

圖像處理模塊，用于在所述服飾關鍵點的檢測裝置獲得第一圖像中服飾的關鍵點坐標和第二圖像中服飾的關鍵點坐標之后，基于所述第一圖像中服飾的關鍵點坐標和所述第二圖像中服飾的關鍵點坐標對所述第一圖像中服飾和/或所述第二圖像中服飾進行變形處理，以使所述第一圖像中服飾與所述第二圖像中服飾的至少一個關鍵點匹配；以經過變形處理的第一圖像中服飾和所述第二圖像中服飾中的其中一個服飾替換另一個服飾。

根據本發明實施例的又一個方面，提供的一種電子設備，包括：本發明上述任一實施例所述的服飾關鍵點的檢測裝置或者計算設備。

根據本發明實施例的再一個方面，提供的一種電子設備，包括：

處理器和本發明上述任一實施例所述的服飾關鍵點的檢測裝置；

在處理器運行所述服飾關鍵點的檢測裝置時本發明上述任一實施例所述的服飾關鍵點的檢測裝置中的模塊被運行。

根據本發明實施例的再一個方面，提供的一種電子設備，包括：