[發明專利]基于增強現實的著色方法、裝置、電子設備與存儲介質

在審

• 申請號: 201811497751.3
• 申請日: 2018-12-07
• 公開（公告）號: CN111292423A
• 公開（公告）日: 2020-06-16
• 發明（設計）人: 劉享軍;楊超;齊坤鵬;高國平
• 申請（專利權）人: 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06T19/00
• 分類號: G06T19/00;G06T17/20;G06T15/80
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 羅英;劉芳

1.一種基于增強現實的著色方法，其特征在于，包括；

獲取人臉三維網格信息，并基于所述人臉三維網格信息，獲取人臉的目標部位的各頂點的位置坐標和紋理坐標；

根據所述目標部位的各頂點的位置坐標，構建所述目標部位的三維網格，并確定所述三維網格中每個頂點的法線；

基于所述三維網格中每個頂點的位置坐標、紋理坐標、法線，以及所述目標部位預設的明暗貼圖、和所述目標部位的目標RGB值，對所述目標部位進行著色。

2.根據權利要求1所述的方法，其特征在于，所述基于所述三維網格中每個頂點的位置坐標、紋理坐標、法線，以及所述目標部位的預設的明暗貼圖，和所述目標部位的目標RGB值，對所述目標部位進行著色，包括：

根據所述三維網格中每個頂點的位置坐標、紋理坐標和法線，對每個頂點所在的三角面進行光柵化處理，確定每個三角面中各像素點的位置坐標、紋理坐標和法線；

根據每個所述像素點的位置坐標和紋理坐標，從所述明暗貼圖中獲取每個像素點對應的灰度值；

根據每個像素點的灰度值和法線、以及所述目標RGB值，對所述每個像素點進行著色。

3.根據權利要求2所述的方法，其特征在于，所述根據每個像素點的灰度值和法線、以及所述目標RGB值，對所述每個像素點進行著色，包括：

根據每個所述像素點的法線、漫反射強度、光線方向和所述目標RGB值，確定每個所述像素點的漫反射顏色值；

根據每個所述像素點的法線和灰度值，以及預設的高光強度、光線方向、視線方向和光滑度系數，確定每個所述像素點的高光顏色；

根據每個所述像素點的漫反射顏色值和所述高光顏色，確定每個所述像素點輸出到顯示器上的顏色值。

4.根據權利要求3所述的方法，其特征在于，所述根據每個所述像素點的漫反射顏色值和所述高光顏色，確定每個所述像素點輸出到顯示器上的顏色值，包括：

針對每個像素點，將該像素點的漫反射顏色值和高光顏色之和，作為該像素點輸出到顯示器上的顏色值。

5.根據權利要求1所述的方法，其特征在于，所述確定所述三維網格中每個頂點的法線，包括：

針對所述三維網格中每個頂點，獲取包括該頂點的所有三角形；

確定該頂點在每個三角形上的法線；

根據該頂點在每個三角形上的法線，確定該頂點的法線。

6.根據權利要求5所述的方法，其特征在于，所述根據該頂點在每個三角形上的法線，確定該頂點的法線，包括：

將該頂點在每個三角形上的法線進行相加并歸一化處理，獲得該頂點的法線。

7.根據權利要求5所述的方法，其特征在于，所述確定該頂點在每個三角形上的法線，包括：

將所述三角形中該頂點所在的兩條邊的向量進行叉乘計算，確定該頂點在每個三角形上的法線。

8.根據權利要求1-7任一項所述的方法，其特征在于，所述目標部位為唇部，所述目標RGB值為目標唇彩的RGB值。

9.一種基于增強現實的著色裝置，其特征在于，包括；

獲取模塊，用于獲取人臉三維網格信息，并基于所述人臉三維網格信息，獲取人臉的目標部位的各頂點的位置坐標和紋理坐標；

構建模塊，用于根據所述目標部位的各頂點的位置坐標，構建所述目標部位的三維網格；

法線確定模塊，用于確定所述三維網格中每個頂點的法線；

著色模塊，用于基于所述三維網格中每個頂點的位置坐標、紋理坐標、法線，以及所述目標部位預設的明暗貼圖、和所述目標部位的目標RGB值，對所述目標部位進行著色。