[發明專利]圖像處理方法及其裝置

有效

• 申請號: 201710676901.6
• 申請日: 2017-08-09
• 公開（公告）號: CN107610171B
• 公開（公告）日: 2020-06-12
• 發明（設計）人: 張學勇
• 申請（專利權）人: OPPO廣東移動通信有限公司
• 主分類號: G06T7/593
• 分類號: G06T7/593;G06T19/20
• 代理公司: 深圳市世紀恒程知識產權代理事務所 44287
• 代理人: 胡海國

1.一種圖像處理方法，其特征在于，包括：

基于結構光獲取用戶的人體3D模型，其中，所述人體3D模型基于結構光生成畸變的光條二維圖像，并對畸變的光條二維圖像基于預設公式重現生成，所述預設公式為：[x,y,z]為經重現生成的所述人體3D模型的坐標，b為對所述結構光投射的投射裝置與生成畸變的所述光條二維圖像的攝像頭之間的基線間距，F為所述攝像頭的焦距，θ為所述投射裝置的投射角度，[x’,y’]為所述光條二維圖像的坐標；

根據用戶的操作，從預設3D場景庫中，選定目標場景模型；

將所述人體3D模型與所述目標場景模型進行融合，得到拍攝模型；

根據預先確定的拍攝視角，對所述拍攝模型進行成像，得到所需圖像。

2.根據權利要求1所述的方法，其特征在于，所述將所述人體3D模型與所述目標場景模型進行融合，得到拍攝模型，包括：

選取所述人體3D模型中的第一參考區域；

獲取所述第一參考區域的深度信息；

從所述目標場景模型中，查詢第二參考區域；所述第二參考區域的深度信息與所述第一參考區域的深度信息匹配；

調整所述人體3D模型與所述目標場景模型的相對位置關系，以使所述第一參考區域和所述第二參考區域重合，得到所述拍攝模型。

3.根據權利要求2所述的方法，其特征在于，所述獲取所述第一參考區域的深度信息，包括：

獲取所述第一參考區域的中心點以及所述第一參考區域的各邊緣點的深度信息；

根據所述中心點的深度信息和所述各邊緣點的深度信息進行加權平均，形成第一參考區域的深度信息。

4.根據權利要求2所述的方法，其特征在于，所述選取所述人體3D模型中的第一參考區域，包括：

根據所述人體3D模型中人體的姿態，預測所述人體與場景的接觸區域；所述接觸區域包括臀部區域、腳部區域、手部區域中的至少一個；

根據所述人體與場景的接觸區域，從所述人體3D模型中選取第一參考區域。

5.根據權利要求1-4任一項所述的方法，其特征在于，所述基于結構光獲取用戶的人體3D模型，包括：

向當前場景發射結構光；

識別所述場景內的人體；

采集所述結構光在所述人體上形成的投射光，并根據所述人體上形成的投射光生成人體的深度圖像，所述人體的深度圖像為畸變的光條二維圖像；

基于所述深度圖像重構所述人體3D模型。

6.根據權利要求5所述的方法，其特征在于，所述識別所述場景內的人體之后，還包括：

采集所述場景內除所述人體之外的背景上形成的投射光；

根據所述背景上形成的投射光，生成場景模型；

將生成的場景模型添加到所述3D場景庫中。

7.根據權利要求1-4任一項所述的方法，其特征在于，所述結構光為非均勻的結構光，所述非均勻的結構光為多個光斑的集合構成的散斑圖案或亂點圖案，是由設置在終端上的投射裝置中的衍射光學元件形成的，其中，所述衍射光學元件上設置有一定數量的浮雕，所述浮雕的凹槽深度不同。

8.一種圖像處理裝置，其特征在于，包括：

建模模塊，用于基于結構光獲取用戶的人體3D模型，其中，所述人體3D模型基于結構光生成畸變的光條二維圖像，并對畸變的光條二維圖像基于預設公式重現生成，所述預設公式為：[x,y,z]為經重現生成的所述人體3D模型的坐標，b為對所述結構光投射的投射裝置與生成畸變的所述光條二維圖像的攝像頭之間的基線間距，F為所述攝像頭的焦距，θ為所述投射裝置的投射角度，[x’,y’]為所述光條二維圖像的坐標；

選取模塊，用于根據用戶的操作，從預設3D場景庫中，選定目標場景模型；

融合模塊，用于將所述人體3D模型與所述目標場景模型進行融合，得到拍攝模型；

成像模塊，用于根據預先確定的拍攝視角，對所述拍攝模型進行成像，得到所需圖像。