[發明專利]圖像處理裝置、圖像處理方法和機器可讀存儲介質

在審

• 申請號: 202010948016.0
• 申請日: 2020-09-10
• 公開（公告）號: CN114170643A
• 公開（公告）日: 2022-03-11
• 發明（設計）人: 石自強;林慧鑌;劉柳;劉汝杰;宓曉宇;村瀨健太郎
• 申請（專利權）人: 富士通株式會社
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V10/764;G06V10/82;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 唐京橋;姜婷

1.一種圖像處理裝置，包括：

信息獲取單元，其將輸入的圖像劃分為多個區域，并且獲取關于所述多個區域中的面部動作單元的信息；

動作單元特征提取單元，其基于所獲取的關于所述面部動作單元的信息來對所述面部動作單元的區域提取動作單元特征；

全局面部特征提取單元，其基于所獲取的關于所述面部動作單元的信息提取全局面部特征；以及

分類單元，其基于所述動作單元特征和所述全局面部特征兩者來對所述面部動作單元進行分類。

2.根據權利要求1所述的圖像處理裝置，還包括：

動作單元區域確定單元，其在所述動作單元特征提取單元提取所述動作單元特征之前，針對每個面部動作單元確定新的區域，所述新的區域僅包括所述圖像中的面部區域，并且

其中，所述動作單元特征提取單元基于所確定的新的區域來提取所述動作單元特征。

3.根據權利要求2所述的圖像處理裝置，其中，所述動作單元區域確定單元通過以下方式來針對每個面部動作單元確定新的區域：根據所述圖像中的面部動作單元構造三維3D面部模型，并且利用所述3D面部模型對所述面部動作單元的區域進行修正，使得修正后的每個面部動作單元的區域僅包括所述圖像中的面部區域。

4.根據權利要求1所述的圖像處理裝置，其中，關于所述面部動作單元的信息包括指示所述面部動作單元在所述圖像中的位置的信息。

5.根據權利要求1所述的圖像處理裝置，其中，所述信息獲取單元通過將所述圖像轉換為低維空間中的特征圖來獲取關于所述面部動作單元的信息。

6.根據權利要求1所述的圖像處理裝置，其中，所述動作單元特征提取單元通過多個卷積層針對每個面部動作單元的區域單獨地提取所述動作單元特征。

7.根據權利要求5所述的圖像處理裝置，其中，所述全局面部特征提取單元通過多個卷積層基于所述特征圖提取所述全局面部特征。

8.根據權利要求1所述的圖像處理裝置，其中，所述分類單元通過分析所有面部動作單元出現的概率來對所述面部動作單元進行分類。

9.一種圖像處理方法，包括：

將輸入的圖像劃分為多個區域，并且獲取關于所述多個區域中的面部動作單元的信息；

基于所獲取的關于所述面部動作單元的信息來對所述面部動作單元的區域提取動作單元特征；

基于所獲取的關于所述面部動作單元的信息提取全局面部特征；以及

基于所述動作單元特征和所述全局面部特征兩者來對所述面部動作單元進行分類。

10.一種機器可讀存儲介質，其上攜帶有包括存儲在其中的機器可讀指令代碼的程序產品，其中，所述指令代碼當由計算機讀取和執行時，能夠使所述計算機執行根據權利要求9所述的圖像處理方法。