[發明專利]圖像處理裝置和圖像處理方法

有效

• 申請號: 201410077014.3
• 申請日: 2014-03-04
• 公開（公告）號: CN104899544B
• 公開（公告）日: 2019-04-12
• 發明（設計）人: 陳曾;王喜順;呂尤
• 申請（專利權）人: 佳能株式會社
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 中國國際貿易促進委員會專利商標事務所 11038
• 代理人: 羅銀燕

本發明公開了圖像處理裝置和圖像處理方法。用于群體的圖像序列的圖像處理裝置包括：被配置為獲取所述群體的圖像序列的單元，其中所述群體包括至少兩個人；被配置為檢測所述圖像序列的每個圖像中的每個人的面部區域的單元；被配置為識別所述圖像序列的每個圖像中的每個人的面部區域的屬性的單元；以及被配置為基于所述圖像序列的每個圖像中的每個人的面部區域的屬性來確定群體屬性的單元。本發明基于群體屬性來選擇面部區域或圖像，由此能夠獲得群體的令人滿意的圖像和/或能夠應對除預定屬性之外的各種其它屬性。

技術領域

本發明一般涉及圖像處理、計算機視覺和模式識別的領域，特別涉及用于群體的圖像序列和視頻序列的圖像處理裝置、以及用于群體的圖像序列和視頻序列的圖像處理方法。

背景技術

在拍攝群體（包括至少兩個個體，例如，包括至少兩個人）的圖像序列的情況下，通常希望能夠方便地從其獲得令人滿意的圖像，在所述令人滿意的圖像中，每個人的屬性（例如，諸如“微笑”、“悲傷”和“中性”的表情屬性，或者諸如“眨眼”、“皺鼻”和“張嘴”的運動單元屬性）都是令人滿意的。

為了應對這一情形，已經提出各種圖像處理方法，其中一種被示于圖1（參見US2011/0109770A1）中。在圖1的流程圖中，首先，在步驟10處，圖像中的每個面部被檢測。接下來，在步驟20處，通過將每個面部的評估出的預定表情轉換成數值，計算每個面部的預定表情值。然后，在步驟30處，基于對于所有面部的多個預定表情值，計算群體的決定表情值。在步驟40處，判斷決定表情值是否等于或大于預定閾值。如果是，那么在步驟50處所述圖像被存儲，并且然后處理前進至步驟60；否則，處理直接前進至步驟60。在步驟60處，判斷是否還有其它圖像。如果是，那么處理前進至移動至下一圖像的步驟70，并且然后處理回到步驟10；否則，處理結束。

然而，以上圖像處理方法具有許多限制。

首先，這樣的方法利用群體的決定表情值來選擇圖像，這使得由此選擇的圖像可能未示出每個人的令人滿意的表情。例如，對于一個圖像，如果群體的大多數具有同一“微笑”表情而僅僅少數人具有諸如“悲傷”或“中性”的不同表情，那么所述圖像仍可能被這樣的方法選擇。然而，群體的情緒基調（emotional tone）（或氛圍（atmosphere））應該是大多數的表情（即，“微笑”），并且所述圖像中的少數人的“悲傷”或“中性”表情不與其一致。由此，所述圖像并不能被視為令人滿意的圖像，因為并不是所有的表情都與群體的情緒基調最一致。

其次，這樣的方法是基于預定表情（例如，“微笑”）并計算每個面部的預定表情值。如果一個圖像中的群體不具有預定表情（例如，每個人都具有“悲傷”表情），那么所述圖像根本就不將被選擇。然而，不包含預定表情的圖像可能仍具有其它顯著的效果（例如，“悲傷”或“震驚”效果）。由此，包含除預定表情之外的各種其它表情的極好圖像可能被錯過。

因此，希望能夠提供能夠應對以上問題中的至少一個問題的新圖像處理裝置和新圖像處理方法。

發明內容

鑒于以上問題中的至少一個問題提出本發明。

本發明的一個目的是提供用于群體的圖像序列和/或視頻序列的新圖像處理裝置、以及用于群體的圖像序列和/或視頻序列的新圖像處理方法。

本發明的另一目的是提供能夠從群體的圖像序列和/或視頻序列獲得令人滿意的圖像的圖像處理裝置和圖像處理方法，在所述令人滿意的圖像中，每個個體的屬性都盡可能地與群體屬性一致。

本發明的又一目的是提供能夠應對除預定屬性之外的各種其它屬性的圖像處理裝置和圖像處理方法。