[發明專利]圖像處理方法、裝置和系統及存儲介質

有效

• 申請號: 201810202079.4
• 申請日: 2018-03-12
• 公開（公告）號: CN108875540B
• 公開（公告）日: 2021-11-05
• 發明（設計）人: 周舒暢;何蔚然;楊文昊
• 申請（專利權）人: 北京曠視科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/34;G06K9/62
• 代理公司: 北京睿邦知識產權代理事務所(普通合伙) 11481
• 代理人: 徐丁峰;戴亞南

本發明實施例提供一種圖像處理方法、裝置和系統以及存儲介質。圖像處理方法包括：獲取人臉圖像；對人臉圖像進行人臉語義分割，以獲得用于指示人臉圖像中的人臉所在位置的人臉熱力圖和用于指示人臉圖像中的不同像素是否屬于同一人臉的標簽信息；以及基于標簽信息和人臉熱力圖區分人臉熱力圖中的不同人臉。根據本發明實施例的圖像處理方法、裝置和系統以及存儲介質，在對人臉圖像進行人臉語義分割時，除獲得人臉熱力圖之外，還獲得標簽信息?；跇撕炐畔⒖梢詤^分人臉熱力圖中的不同人臉。結合人臉熱力圖和標簽信息可以識別人臉圖像中的每個人臉所在的位置。因此，根據本發明實施例的圖像處理方法可以很好地解決多個人臉重疊時無法區分的問題。

技術領域

本發明涉及圖像處理領域，更具體地涉及一種圖像處理方法、裝置和系統以及存儲介質。

背景技術

在傳統的人臉語義分割技術中，對于一張輸入圖像，輸出一張人臉熱力圖，人臉熱力圖中的響應區域對應于輸入圖像中人臉所在的區域。這種方法的局限在于，當多個人臉有重疊時，無法通過人臉熱力圖區分彼此。因此，需要提供一種新的用于實現人臉語義分割的圖像處理方法。

發明內容

考慮到上述問題而提出了本發明。本發明提供了一種圖像處理方法、裝置和系統以及存儲介質。

根據本發明一方面，提供了一種圖像處理方法。圖像處理方法包括：獲取人臉圖像；對人臉圖像進行人臉語義分割，以獲得用于指示人臉圖像中的人臉所在位置的人臉熱力圖和用于指示人臉圖像中的不同像素是否屬于同一人臉的標簽信息；以及基于標簽信息和人臉熱力圖區分人臉熱力圖中的不同人臉。

示例性地，標簽信息包括標簽信息圖，標簽信息圖中的每個像素與人臉圖像中的一個或多個像素相對應，標簽信息圖中的像素值一致的像素用于指示人臉圖像中的對應像素屬于同一人臉。

示例性地，標簽信息包括至少兩個圖像，基于標簽信息和人臉熱力圖區分人臉熱力圖中的不同人臉包括：將至少兩個圖像結合，并基于結合后的圖像區分人臉熱力圖中的不同人臉。

示例性地，方法還包括：基于人臉熱力圖和標簽信息判斷人臉圖像中的目標人臉是否被遮擋。

示例性地，基于人臉熱力圖和標簽信息判斷人臉圖像中的目標人臉是否被遮擋包括：基于標簽信息，從人臉熱力圖或對人臉熱力圖進行轉換獲得的轉換熱力圖中提取包含目標人臉的目標熱力圖區域；基于目標熱力圖區域判斷目標人臉是否被遮擋。

示例性地，方法還包括：對人臉熱力圖進行插值和/或縮放，以獲得轉換熱力圖。

示例性地，基于目標熱力圖區域判斷目標人臉是否被遮擋包括：計算目標熱力圖區域中的目標人臉與標準人臉熱力圖中的標準人臉之間的相似度；將相似度與相似度閾值相比較，如果相似度大于相似度閾值，則確定目標人臉未被遮擋，否則確定目標人臉被遮擋。

示例性地，基于目標熱力圖區域判斷目標人臉是否被遮擋包括：將目標熱力圖區域輸入遮擋判斷網絡，以獲得用于指示目標人臉是否被遮擋的目標遮擋結果。

示例性地，目標遮擋結果包括目標人臉被遮擋的概率。

示例性地，目標遮擋結果包括目標人臉分別被至少一種預定遮擋物遮擋的概率。

示例性地，基于標簽信息，從人臉熱力圖或對人臉熱力圖進行轉換獲得的轉換熱力圖中提取包含目標人臉的目標熱力圖區域包括：基于標簽信息確定目標人臉在人臉熱力圖或轉換熱力圖中的位置；以及根據確定的位置從人臉熱力圖或轉換熱力圖中提取目標熱力圖區域。

根據本發明另一方面，提供了一種圖像處理裝置，包括：獲取模塊，用于獲取人臉圖像；以及語義分割模塊，用于對人臉圖像進行人臉語義分割，以獲得用于指示人臉圖像中的人臉所在位置的人臉熱力圖和用于指示人臉圖像中的不同像素是否屬于同一人臉的標簽信息；區分模塊，用于基于標簽信息和人臉熱力圖區分人臉熱力圖中的不同人臉。