[發明專利]檢測數字圖像中的臉部表情

有效

• 申請號: 200980102866.0
• 申請日: 2009-01-20
• 公開（公告）號: CN102007499A
• 公開（公告）日: 2011-04-06
• 發明（設計）人: D·埃米利安;E·斯泰恩伯格;E·扎拉科維;P·比吉奧埃;S·佩特雷斯酷;C·尼格希納;M·甘吉亞
• 申請（專利權）人: 泰塞拉技術愛爾蘭公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 北京市金杜律師事務所 11256
• 代理人: 王茂華

1.一種作為采集過程一部分的對包括一個或者多個臉部的靜止圖像的在相機中的處理的方法，包括：

標識與便攜相機上的至少一個數字采集圖像內的臉部對應的像素組；

在相機中生成、捕獲或者以別的方式在相機中獲得包括臉部的相對較低分辨率圖像的集合；

跟蹤所述相對較低分辨率圖像的集合內的所述臉部；

采集包括所述臉部的所述相對較低分辨率圖像的集合中的多個圖像的裁剪版本；

在所述多個圖像內積累所述臉部的微笑狀態信息；

基于所述積累的微笑狀態信息對所述臉部的統計微笑狀態進行分類；以及

啟動基于分析的結果來選擇的一個或者多個與微笑狀態相關的操作。

2.根據權利要求1所述的方法，還包括將臉部識別應用于所述多個圖像中的一個或者多個圖像。

3.根據權利要求1所述的方法，還包括針對所述臉部確定姿態或者照明條件或者這二者，以及訓練基于所述確定的姿態或者照明或者這二者來調節的具體臉部分類器集。

4.根據權利要求1所述的方法，其中所述對所述統計微笑狀態的分類包括分配哈爾和/或人口普查特征鏈。

5.根據權利要求1所述的方法，其中所述裁剪版本各自基本上僅包括所述圖像中的包括所述臉部的區域。

6.根據權利要求1所述的方法，其中所述裁剪版本各自基本上僅包括所述圖像中的包括所述臉部的嘴部區域的區域。

7.根據權利要求1所述的方法，其中所述分類包括閾值化，從而分類結果包括微笑、無微笑或者無結論。

8.根據權利要求1所述的方法，其中所述分類還包括：計算所述相對較低分辨率圖像的集合中的幀之間的統計微笑差別矢量，以及確定某個閾值或者更多差別對應于姿態、照明或者其他圖像參數的驟變或者可變微笑狀態，并且其中所述分類還包括確認所述某個閾值或者更多差別的具體成因。

9.根據權利要求1所述的方法，其中標識和跟蹤多個臉部，并且對針對所述多個臉部中的各臉部的微笑狀態信息進行分類，并且所述方法還包括：如果將多于第一閾值數目的臉部分類為無微笑或者如果將少于第二閾值數目的臉部分類為微笑或者如果這二者均成立則啟動與微笑相關的組拍攝操作。

10.根據權利要求1所述的方法，還包括合成最佳微笑圖像，包括組合所述至少一個數字采集圖像的一個或者多個臉部區域與所述相對較低分辨率圖像的集合中的一個或者多個所述圖像的最佳微笑區域。

11.根據權利要求2所述的方法，還包括訓練各自包括具體識別的人臉的圖像的相對短的分類器級聯。

12.根據權利要求11所述的方法，其中所述相對短的分類器級聯包括所述具體識別的人臉的不同姿態或者照明或者這二者。

13.根據權利要求2所述的方法，還包括在將所述臉部分類為微笑或者無微笑或者其組合時啟動或者延遲圖像采集。

14.根據權利要求2所述的方法，還包括在所述臉部未識別為具體識別的人或者未分類為微笑時延遲圖像采集。

15.根據權利要求2所述的方法，還包括在所述臉部識別為具體識別的人并且分類為微笑時啟動圖像采集。

16.根據權利要求9所述的方法，其中所述與微笑相關的組拍攝操作包括向用戶觸發告警信號或者延遲對組拍攝的采集直至確定將少于所述第一閾值數目的臉部分類為無微笑或者將多于所述第二閾值數目的臉部分類為微笑或者這二者均成立。

17.根據權利要求10所述的方法，其中所述最佳微笑區域包括分類為微笑的概率最高的嘴部區域。

18.根據權利要求1所述的方法，其中所述對與臉部對應的所述像素組的標識包括應用與所述分類近似相同的哈爾和/或人口普查特征。

19.根據權利要求7所述的方法，其中所述閾值化包括比較所述統計微笑狀態與微笑可能性在60％-90％之間的第一閾值或者微笑可能性為10％-40％的第二閾值或者這二者，其中所述60％-90％或者更多對應于微笑結果，而所述10％-40％或者更少對應于無微笑結果，并且在所述10％-40％和所述60％-90％之間對應于無結論結果。