[發明專利]臉部圖像處理裝置和臉部圖像處理程序

在審

• 申請號: 202110274666.6
• 申請日: 2021-03-15
• 公開（公告）號: CN113496195A
• 公開（公告）日: 2021-10-12
• 發明（設計）人: 山田祐也;大須賀晉;上田康貴;河合雄太;加藤隆志;山田善之;小島真一
• 申請（專利權）人: 愛信精機株式會社
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06T7/73
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 舒艷君;王海奇

1.一種臉部圖像處理裝置，具備：

圖像坐標系坐標值導出部，其通過檢測拍攝人物的臉部而得到的圖像的該臉部的器官的特征點各自的圖像坐標系的水平方向的坐標值亦即x坐標值和垂直方向的坐標值亦即y坐標值，并且推斷所述圖像坐標系的深度方向的坐標值亦即z坐標值，來導出所述圖像坐標系的三維坐標值；

相機坐標系坐標值導出部，其根據由所述圖像坐標系坐標值導出部導出的所述圖像坐標系的三維坐標值來導出相機坐標系的三維坐標值；以及

參數導出部，其將由所述相機坐標系坐標值導出部導出的所述相機坐標系的三維坐標值應用于預先決定的三維臉部形狀模型，來導出所述三維臉部形狀模型在所述相機坐標系中的模型參數。

2.根據權利要求1所述的臉部圖像處理裝置，其中，

所述圖像坐標系坐標值導出部通過與所述x坐標值和所述y坐標值的檢測并行地使用深層學習推斷所述z坐標值，來進行導出。

3.根據權利要求1或2所述的臉部圖像處理裝置，其中，

所述三維臉部形狀模型由平均形狀與基底的線性和構成，所述基底被分離為作為不隨時間變化的成分的個人差異基底和作為隨時間變化的成分的表情基底，

所述模型參數包括所述個人差異基底的參數和所述表情基底的參數。

4.根據權利要求3所述的臉部圖像處理裝置，其中，

所述模型參數還包括位置姿勢參數，所述位置姿勢參數表示從拍攝所述人物的臉部的相機觀察到的所述人物的臉部的位置和姿勢。

5.根據權利要求1至4中的任一項所述的臉部圖像處理裝置，其中，

所述臉部圖像處理裝置還具備臉部距離推斷部，所述臉部距離推斷部推斷到所述人物的臉部為止的距離，

所述相機坐標系坐標值導出部使用由所述臉部距離推斷部推斷出的距離來導出所述相機坐標系中的z坐標值。

6.根據權利要求1至5中的任一項所述的臉部圖像處理裝置，其中，

所述臉部圖像處理裝置還具備坐標校正部，所述坐標校正部根據所述圖像中的所述臉部的位置來校正由所述圖像坐標系坐標值導出部導出的z坐標值。

7.根據權利要求1至6中的任一項所述的臉部圖像處理裝置，其中，

所述臉部圖像處理裝置還具備權重設定部，所述權重設定部對所述臉部的器官的特征點的x坐標值、y坐標值和z坐標值的誤差評價值分別設定獨立的權重。

8.一種臉部圖像處理程序，用于使計算機執行如下處理：

通過檢測拍攝人物的臉部而得到的圖像的該臉部的器官的特征點各自的圖像坐標系的水平方向的坐標值亦即x坐標值和垂直方向的坐標值亦即y坐標值，并且推斷所述圖像坐標系的深度方向的坐標值亦即z坐標值，來導出所述圖像坐標系的三維坐標值，

根據所導出的所述圖像坐標系的三維坐標值來導出相機坐標系的三維坐標值，

將所導出的所述相機坐標系的三維坐標值應用于預先決定的三維臉部形狀模型，來導出所述三維臉部形狀模型在所述相機坐標系中的模型參數。