[發明專利]圖像處理方法及圖像處理裝置、存儲介質

有效

• 申請號: 201710625513.5
• 申請日: 2017-07-27
• 公開（公告）號: CN109325990B
• 公開（公告）日: 2022-11-29
• 發明（設計）人: 易成;李斌;王新亮
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06T15/00
• 分類號: G06T15/00;G06T15/04;G06T15/55
• 代理公司: 北京派特恩知識產權代理有限公司 11270
• 代理人: 趙福梅;張穎玲

1.一種圖像處理方法，其特征在于，包括：

將圖像中的特征點映射到三維模型中的特征點，形成所述圖像中像素點與所述三維模型中三維點的第一映射關系；

根據所述第一映射關系，確定所述三維模型表面各網格的頂點在所述圖像中所映射的目標像素點；

根據所述三維模型中三維點、與所述三維模型的紋理像素點的第二映射關系，確定所述各網格的頂點在所述三維模型中所映射的紋理像素點；

基于預設圖像，對所述三維模型中的以下部分初始化紋理像素點的紋理坐標以及對應的顏色值：

對象的成像部分，為所述對象在所述圖像中成像的部分；

所述對象的未成像部分，為所述對象在所述圖像中未成像的部分；

當所述三維模型包括所述對象在所述圖像的未成像部分時，計算所述對象的平均顏色值；

根據所述平均顏色值，對所述三維模型中所述對象的未成像部分的初始化顏色值進行顏色遷移，或者，

當渲染所述三維模型時，對所述三維模型中所述對象的未成像部分初始顏色值進行顏色遷移，并渲染顏色遷移后的顏色值，以及，

在各網格的頂點所映射的紋理像素點之間進行插值處理。

2.根據權利要求1所述的方法，其特征在于，所述將圖像中的特征點映射到三維模型中的特征點，形成所述圖像中的像素點與所述三維模型中的三維點的第一映射關系，包括：

識別二維的所述圖像中對應對象的特征點；

初始化所述對象中各特征點的二維坐標序列、與所述三維模型中相應特征點的三維坐標序列的映射矩陣；

根據所述圖像中各特征點、與所述三維模型中相應特征點的距離的加和最小，更新所述映射矩陣。

3.根據權利要求1所述的方法，其特征在于，

所述根據所述第一映射關系，確定所述三維模型表面各網格的頂點在所述圖像中所映射的目標像素點，包括：

以所述網格的頂點的三維坐標查找所述第一映射關系，得到所述各網格的頂點在所述圖像中所映射到的像素點的二維坐標；

所述根據所述三維模型中三維點、與所述三維點的紋理像素點的第二映射關系，確定所述各網格的頂點在所述三維模型中所映射的紋理像素點，包括：

以所述各網格的頂點的三維坐標查找所述第二映射關系，得到相應網格的頂點在所述三維模型中所映射到的紋理像素點的紋理坐標。

4.根據權利要求1所述的方法，其特征在于，所述方法還包括：

當所述三維模型包括僅包括對象在所述圖像的成像部分時，

計算所述對象的平均顏色值；

利用加和處理得到的顏色值，替換相應網格的頂點的初始化顏色值；或者，

當渲染所述三維模型時，計算所述對象的平均顏色值；

利用加和處理得到的顏色值，替換相應網格的頂點的初始化顏色值，并渲染替換后的顏色值。

5.根據權利要求1所述的方法，其特征在于，

所述對所述三維模型中所述對象的未成像部分的初始化顏色值進行顏色遷移，包括：

將所述三維模型中所述對象的未成像部分中各像素點的初始顏色值與所述平均顏色值進行加和處理；

利用加和處理得到顏色值，替換所述未成像部分中相應像素點的初始化顏色值。

6.根據權利要求1或5所述的方法，其特征在于，所述計算所述對象的平均顏色值，包括：

計算所述圖像中所述對象的成像部分的第一平均顏色值、以及，計算所述三維模型中所述對象的成像部分的第二平均顏色值；

計算所述第一平均顏色值和所述第二平均顏色值的差值，得到所述平均顏色值。

7.根據權利要求6所述的方法，其特征在于，還包括：

計算所述第一平均顏色值和所述第二平均顏色值之前，

將所述圖像中所述對象的成像部分、以及所述三維模型中所述成像部分，篩除超出預設顏色值閾值的像素點。