[發(fā)明專利]三維模型建立方法、裝置和移動(dòng)終端

有效

• 申請(qǐng)?zhí)枺?/td>: 201710676992.3
• 申請(qǐng)日: 2017-08-09
• 公開（公告）號(hào): CN107592449B
• 公開（公告）日: 2020-05-19
• 發(fā)明（設(shè)計(jì)）人: 張學(xué)勇
• 申請(qǐng)（專利權(quán)）人: OPPO廣東移動(dòng)通信有限公司
• 主分類號(hào): H04N5/232
• 分類號(hào): H04N5/232;H04W52/02;G06T17/00;G06T7/521;G06K9/00
• 代理公司: 深圳市智圈知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44351
• 代理人: 苗燕

1.一種三維模型建立方法，其特征在于，包括：

對(duì)當(dāng)前獲取的圖像進(jìn)行人臉識(shí)別，確定所述當(dāng)前獲取的圖像中用戶的人臉圖像；

判斷預(yù)設(shè)的模型庫中是否有與所述用戶的人臉圖像對(duì)應(yīng)的3D模型，所述預(yù)設(shè)的模型庫中存儲(chǔ)有用戶的臉部3D模型及對(duì)應(yīng)的人臉圖像；

若有，對(duì)所述用戶的五官所在區(qū)域及臉部邊緣區(qū)域或所述用戶的臉部區(qū)域投射非均勻的結(jié)構(gòu)光圖案，獲取投影至所述用戶的五官所在區(qū)域及臉部邊緣區(qū)域或所述用戶的臉部區(qū)域形成的結(jié)構(gòu)光圖像，從所述結(jié)構(gòu)光圖像中采集所述用戶的五官邊緣及臉部邊緣的散斑圖像，根據(jù)所述散斑圖像，獲取所述用戶的五官邊緣的散斑圖像中各個(gè)散斑點(diǎn)的深度值，并根據(jù)所述深度值得到的所述五官邊緣的深度信息，確定所述用戶當(dāng)前的臉部輪廓信息及動(dòng)作信息，基于所述用戶當(dāng)前的臉部輪廓信息及動(dòng)作信息對(duì)與所述用戶的人臉圖像對(duì)應(yīng)的3D模型中的臉部輪廓信息及動(dòng)作信息進(jìn)行修正或更新，生成與所述用戶當(dāng)前的臉部輪廓信息及動(dòng)作信息對(duì)應(yīng)的所述用戶當(dāng)前的臉部3D模型；

若無，則根據(jù)第二預(yù)設(shè)的方式，生成所述用戶當(dāng)前的臉部3D模型，其中，基于所述用戶當(dāng)前的臉部輪廓信息及動(dòng)作信息對(duì)與所述用戶的人臉圖像對(duì)應(yīng)的3D模型中的臉部輪廓信息及動(dòng)作信息進(jìn)行修正或更新，生成所述用戶當(dāng)前的臉部3D模型時(shí)，比根據(jù)所述第二預(yù)設(shè)的方式，生成所述用戶當(dāng)前的臉部3D模型時(shí)的功耗小。

2.如權(quán)利要求1所述的方法，其特征在于，所述確定所述用戶當(dāng)前的臉部輪廓信息及動(dòng)作信息之前，還包括：

降低所述非均勻結(jié)構(gòu)光的發(fā)射數(shù)量；

和/或，降低對(duì)獲取的非均勻散斑的解析數(shù)量。

3.如權(quán)利要求1或2所述的方法，其特征在于，所述確定所述用戶當(dāng)前的臉部輪廓信息及動(dòng)作信息，包括：

獲取所述用戶的五官邊緣對(duì)應(yīng)的特征信息；

根據(jù)所述用戶的五官邊緣對(duì)應(yīng)的特征信息，確定所述用戶的臉部輪廓及動(dòng)作信息。

4.如權(quán)利要求1-2任一所述的方法，其特征在于，所述根據(jù)第二預(yù)設(shè)的方式，生成所述用戶的臉部3D模型，包括：

利用非均勻結(jié)構(gòu)光，獲取所述用戶的臉部深度信息；

對(duì)所述用戶的臉部深度信息進(jìn)行解析，生成所述用戶的臉部3D模型。

5.一種三維模型建立裝置，其特征在于，包括：

確定模塊，用于對(duì)當(dāng)前獲取的圖像進(jìn)行人臉識(shí)別，確定所述當(dāng)前獲取的圖像中用戶的人臉圖像；

判斷模塊，用于判斷預(yù)設(shè)的模型庫中是否有與所述用戶的人臉圖像對(duì)應(yīng)的3D模型，所述預(yù)設(shè)的模型庫中存儲(chǔ)有用戶的臉部3D模型及對(duì)應(yīng)的人臉圖像；

第一生成模塊，用于預(yù)設(shè)的模型庫中有與所述用戶的人臉圖像對(duì)應(yīng)的3D模型時(shí)，對(duì)所述用戶的五官所在區(qū)域及臉部邊緣區(qū)域或所述用戶的臉部區(qū)域投射非均勻的結(jié)構(gòu)光圖案，獲取投影至所述用戶的五官所在區(qū)域及臉部邊緣區(qū)域或所述用戶的臉部區(qū)域形成的結(jié)構(gòu)光圖像，從所述結(jié)構(gòu)光圖像中采集所述用戶的五官邊緣及臉部邊緣的散斑圖像，根據(jù)所述散斑圖像，獲取所述用戶的五官邊緣的散斑圖像中各個(gè)散斑點(diǎn)的深度值，并根據(jù)所述深度值得到的所述五官邊緣的深度信息，確定所述用戶當(dāng)前的臉部輪廓信息及動(dòng)作信息，基于所述用戶當(dāng)前的臉部輪廓信息及動(dòng)作信息對(duì)與所述用戶的人臉圖像對(duì)應(yīng)的3D模型中的臉部輪廓信息及動(dòng)作信息進(jìn)行修正或更新，生成與所述用戶當(dāng)前的臉部輪廓信息及動(dòng)作信息對(duì)應(yīng)的所述用戶當(dāng)前的臉部3D模型；

第二生成模塊，用于預(yù)設(shè)的模型庫中沒有與所述用戶的人臉圖像對(duì)應(yīng)的3D模型時(shí)，根據(jù)第二預(yù)設(shè)的方式，生成所述用戶當(dāng)前的臉部3D模型，其中，基于所述用戶當(dāng)前的臉部輪廓信息及動(dòng)作信息對(duì)與所述用戶的人臉圖像對(duì)應(yīng)的3D模型中的臉部輪廓信息及動(dòng)作信息進(jìn)行修正或更新，生成所述用戶當(dāng)前的臉部3D模型時(shí)，比根據(jù)所述第二預(yù)設(shè)的方式，生成所述用戶當(dāng)前的臉部3D模型時(shí)的功耗小。

6.如權(quán)利要求5所述的裝置，其特征在于，所述第一生成模塊，還包括：

控制單元，用于降低所述非均勻結(jié)構(gòu)光的發(fā)射數(shù)量；

和/或，用于降低對(duì)獲取的非均勻散斑的解析數(shù)量。