[發(fā)明專利]一種基于三目相機(jī)的三維人臉采集方法及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 202010071240.6
• 申請(qǐng)日: 2020-01-21
• 公開(kāi)（公告）號(hào): CN111325828A
• 公開(kāi)（公告）日: 2020-06-23
• 發(fā)明（設(shè)計(jì)）人: 毛泉涌;陳初杰;杜鑫;于澤坤;瞿崇曉;陳夏燕
• 申請(qǐng)（專利權(quán)）人: 中國(guó)電子科技集團(tuán)公司第五十二研究所
• 主分類號(hào): G06T17/00
• 分類號(hào): G06T17/00;G06T15/04
• 代理公司: 杭州君度專利代理事務(wù)所(特殊普通合伙) 33240
• 代理人: 楊天嬌

1.一種基于三目相機(jī)的三維人臉采集方法，其特征在于，所述三目相機(jī)包括中間的RGB相機(jī)和左右的IR相機(jī)、以及兩組IR散斑投射器，所述基于三目相機(jī)的三維人臉采集方法，包括：

獲取三目相機(jī)采集的RGB人臉圖像和左右IR散斑紋理人臉圖像；

利用RGB人臉圖像進(jìn)行人臉框和人臉關(guān)鍵點(diǎn)檢測(cè)，得到精確的人臉關(guān)鍵點(diǎn)；

將人臉關(guān)鍵點(diǎn)投影到左右IR散斑紋理人臉圖像中，計(jì)算左右IR散斑紋理人臉圖像中對(duì)應(yīng)人臉關(guān)鍵點(diǎn)的坐標(biāo)；

通過(guò)迭代人臉關(guān)鍵點(diǎn)在左右IR散斑紋理人臉圖像上的投影位置，修正誤差；

計(jì)算基于左右IR散斑紋理人臉圖像中的人臉關(guān)鍵點(diǎn)坐標(biāo)信息最小外接矩形框的并集的行數(shù)和列數(shù)，作為左右人臉框的行數(shù)和列數(shù)；

計(jì)算RGB人臉圖像原始分辨率的法向圖；

計(jì)算左IR散斑紋理人臉圖像中的像素塊像素坐標(biāo)投影到右IR散斑紋理人臉圖像中得到對(duì)應(yīng)的灰度值；

遍歷整個(gè)RGB人臉圖像，即得到精確的人臉深度圖，利用內(nèi)參矩陣反投影得到最終的人臉點(diǎn)云。

2.根據(jù)權(quán)利要求1所述的基于三目相機(jī)的三維人臉采集方法，其特征在于，所述通過(guò)迭代人臉關(guān)鍵點(diǎn)在左右IR散斑紋理人臉圖像上的投影位置，修正誤差，包括：

對(duì)RGB人臉圖像和左右IR散斑紋理人臉圖像進(jìn)行降分辨率處理。

3.一種基于三目相機(jī)的三維人臉采集裝置，其特征在于，所述三目相機(jī)包括中間的RGB相機(jī)和左右的IR相機(jī)、以及兩組IR散斑投射器，所述基于三目相機(jī)的三維人臉采集裝置，包括：

采集模塊，用于獲取三目相機(jī)采集的RGB人臉圖像和左右IR散斑紋理人臉圖像；

檢測(cè)模塊，用于利用RGB人臉圖像進(jìn)行人臉框和人臉關(guān)鍵點(diǎn)檢測(cè)，得到精確的人臉關(guān)鍵點(diǎn)；

投影模塊，用于將人臉關(guān)鍵點(diǎn)投影到左右IR散斑紋理人臉圖像中，計(jì)算左右IR散斑紋理人臉圖像中對(duì)應(yīng)人臉關(guān)鍵點(diǎn)的坐標(biāo)；

迭代模塊，用于通過(guò)迭代人臉關(guān)鍵點(diǎn)在左右IR散斑紋理人臉圖像上的投影位置，修正誤差；

人臉框計(jì)算模塊，用于計(jì)算基于左右IR散斑紋理人臉圖像中的人臉關(guān)鍵點(diǎn)坐標(biāo)信息最小外接矩形框的并集的行數(shù)和列數(shù)，作為左右人臉框的行數(shù)和列數(shù)；

法向圖計(jì)算模塊，用于計(jì)算RGB人臉圖像原始分辨率的法向圖；

左右投影模塊，用于計(jì)算左IR散斑紋理人臉圖像中的像素塊像素坐標(biāo)投影到右IR散斑紋理人臉圖像中得到對(duì)應(yīng)的灰度值；

輸出模塊，用于遍歷整個(gè)RGB人臉圖像，即得到精確的人臉深度圖，利用內(nèi)參矩陣反投影得到最終的人臉點(diǎn)云。

4.根據(jù)權(quán)利要求3所述的基于三目相機(jī)的三維人臉采集裝置，其特征在于，所述迭代模塊在通過(guò)迭代人臉關(guān)鍵點(diǎn)在左右IR散斑紋理人臉圖像上的投影位置，修正誤差時(shí)，還執(zhí)行如下操作：

對(duì)RGB人臉圖像和左右IR散斑紋理人臉圖像進(jìn)行降分辨率處理。