[發明專利]圖像處理裝置和方法及存儲介質

有效

• 申請號: 201810658747.4
• 申請日: 2018-06-22
• 公開（公告）號: CN110633723B
• 公開（公告）日: 2023-10-17
• 發明（設計）人: 黃耀海;彭健騰
• 申請（專利權）人: 佳能株式會社
• 主分類號: G06V10/764
• 分類號: G06V10/764;G06V10/774;G06V10/44;G06V10/82;G06N3/045
• 代理公司: 北京怡豐知識產權代理有限公司 11293
• 代理人: 遲軍;李艷麗

本發明公開了一種圖像處理裝置和方法及存儲介質。所述圖像處理裝置包括：用于從圖像中提取特征的單元；用于基于所提取的特征確定第一形狀的單元，其中所述第一形狀由在所述圖像中的分布于目標物體周圍的區域構成，其中所述區域為包含人體部件的區域；及用于基于所提取的特征和所述第一形狀將所述目標物體分類為被使用的物體和未被使用的物體的單元。根據本發明，能夠大大地提高對目標物體是否被使用的判斷的準確度。

技術領域

本發明涉及圖像處理裝置和圖像處理方法。

背景技術

在監控系統中，通常涉及通過統計分析圖像/視頻中人們所穿戴或所使用的物體來預測人們的喜好，以便例如為人們提供更好的服務。例如，在某一商場中，可以通過統計圖像/視頻中出現的衣服的屬性(例如，衣服的種類、衣服的樣式、衣服的顏色、衣服的品牌等)來分析顧客的穿衣風格、消費水平等信息，以便該商場能向顧客提供更能滿足他們需求的商品。然而，在實際場景中，通常也會同時出現實際并未被人們所穿著的衣服(例如，衣服展示品)，因此，通常需要先從圖像/視頻中確定出實際正被人們所穿著的衣服，再來統計這類衣服的屬性才能更加準確地分析出顧客的穿衣風格等信息。此外，從圖像/視頻中確定實際正被人們所穿著的衣服，也可有助于確定圖像/視頻中人體的位置、統計圖像/視頻中所包含的人數等信息。

在現有的方法中，如果需要判斷圖像/視頻中出現的衣服是否被人們所穿著，通常會更加地依賴于人臉/頭肩識別方法或人體識別方法。具體地，先通過這些方法從圖像/視頻中檢測人體的區域，之后根據衣服的區域與人體的區域之間的相對位置來間接地判斷衣服是否被人體所穿著；其中，衣服的區域可通過物體檢測方法從圖像/視頻中檢測出來。例如，在某一人體的區域包含某一衣服的區域的情況下，則判斷該衣服被該人體所穿著。又如，在某一衣服的區域在某一人體的區域的相鄰位置的情況下，則判斷該衣服未被該人體所穿著。

然而，在圖像/視頻的畫質較差的情況下(例如，由低分辨率或光照不理想所導致的)，或者，在圖像/視頻中的人體被遮擋的情況下(尤其是人體的關鍵部位被遮擋，例如，人臉、關節點、頭肩等部位)，人臉/頭肩或人體的檢測精度通常會變差，從而會導致錯誤地判斷衣服是否被人體所穿著。也就是說，在圖像/視頻的畫質較差或圖像/視頻中的人體被遮擋的情況下，判斷圖像/視頻中出現的衣服是否被人體所穿著的準確度會受影響。

發明內容

鑒于上面的背景技術中的記載，本發明旨在解決上述問題中的至少一點。

根據本發明的一個方面，提供一種圖像處理裝置，所述圖像處理裝置包括：特征提取單元，從圖像中提取特征；第一形狀確定單元，基于所提取的特征確定第一形狀，其中所述第一形狀由在所述圖像中的分布于目標物體周圍的區域構成，其中所述區域為包含人體部件的區域；及分類單元，基于所提取的特征和所述第一形狀將所述目標物體分類為被使用的物體和未被使用的物體。進一步地，所述特征提取單元，利用第一神經網絡，從圖像中提取特征；所述第一形狀確定單元，利用第二神經網絡，基于所提取的特征確定所述第一形狀；所述分類單元，利用第三神經網絡，基于所提取的特征和所述第一形狀將所述目標物體分類為被使用的物體和未被使用的物體。

根據本發明的另一個方面，提供一種圖像處理方法，所述圖像處理方法包括：特征提取步驟，利用第一神經網絡，從圖像中提取特征；第一形狀確定步驟，利用第二神經網絡，基于所提取的特征確定第一形狀，其中所述第一形狀由在所述圖像中的分布于目標物體周圍的區域構成，其中所述區域為包含人體部件的區域；及分類步驟，利用第三神經網絡，基于所提取的特征和所述第一形狀將所述目標物體分類為被使用的物體和未被使用的物體。進一步地，在所述特征提取步驟中，利用第一神經網絡，從圖像中提取特征；在所述第一形狀確定步驟中，利用第二神經網絡，基于所提取的特征確定所述第一形狀；在所述分類步驟中，利用第三神經網絡，基于所提取的特征和所述第一形狀將所述目標物體分類為被使用的物體和未被使用的物體。

其中，所述目標物體例如為衣物，所述分類單元將衣物分類為被穿著的衣物和未被穿著的衣物。其中，所述衣服例如為衣服、褲子、裙子、帽子、鞋子等。