[發(fā)明專利]三維重建處理方法、裝置、電子設備以及存儲介質

在審

• 申請?zhí)枺?/td>: 202111355721.0
• 申請日: 2021-11-16
• 公開（公告）號: CN114067051A
• 公開（公告）日: 2022-02-18
• 發(fā)明（設計）人: 毋戈
• 申請（專利權）人: 百度在線網絡技術（北京）有限公司
• 主分類號: G06T17/00
• 分類號: G06T17/00
• 代理公司: 北京博浩百睿知識產權代理有限責任公司 11134
• 代理人: 宮傳芝

本公開提供了一種三維重建處理方法、裝置、電子設備以及存儲介質，涉及計算機視覺技術領域，尤其涉及計算機圖形學技術領域。具體實現(xiàn)方案為：獲取目標圖像，其中，上述目標圖像中包含：待重建目標；基于上述待重建目標獲取上述目標圖像的背景蒙版圖像；基于上述背景蒙版圖像對上述待重建目標進行三維重建處理，得到三維重建處理結果。本公開解決了現(xiàn)有技術中三維重建方法存在稀疏重建過程中無法實現(xiàn)相機位姿計算，且稠密建模過程中計算量大、耗時長的技術問題。

技術領域

本公開涉及計算機技術領域，尤其涉及計算機圖形學技術、視覺技術領域，具體涉及一種三維重建處理方法、裝置、電子設備以及存儲介質。

背景技術

現(xiàn)有技術中，基于多視圖的顏色系統(tǒng)Red Green Blue(RGB)圖像的三維重建方法主要可以分為稀疏重建和稠密重建兩部分，稀疏重建主要采用運動恢復結構StructureFrom motion(SFM)來計算相機拍攝圖像時所在的空間位置和方向，稠密重建主要采用多視圖立體視覺Multi-view stereo(MVS)來計算稠密的點云模型。

發(fā)明內容

本公開提供了一種用于三維重建處理方法、裝置、電子設備以及存儲介質。

根據本公開的一方面，提供了一種三維重建處理方法，包括：獲取目標圖像，其中，上述目標圖像中包含：待重建目標；基于上述待重建目標獲取上述目標圖像的背景蒙版圖像；基于上述背景蒙版圖像對上述待重建目標進行三維重建處理，得到三維重建處理結果。

可選的，上述基于上述待重建目標獲取上述目標圖像的背景蒙版圖像，包括：基于上述待重建目標確定上述目標圖像中的背景區(qū)域，其中，上述待重建目標為上述目標圖像中的非背景區(qū)域；對上述目標圖像中的上述背景區(qū)域進行蒙版處理，得到上述背景蒙版圖像。

可選的，上述三維重建處理包括：稀疏重建處理和稠密重建處理，上述基于上述背景蒙版圖像對上述待重建目標進行三維重建處理，得到三維重建處理結果，包括：在上述稀疏重建處理的過程中，基于上述背景蒙版圖像對上述待重建目標進行特征點提取及匹配處理，得到特征提取及匹配結果；在上述稠密重建處理的過程中，基于上述背景蒙版圖像對上述特征提取及匹配結果進行深度圖處理，得到深度圖處理結果；對上述深度圖處理結果進行再處理，得到上述三維重建處理結果，其中，上述再處理包括：表面重建處理和/或紋理貼圖處理。

可選的，上述對上述深度圖處理結果進行再處理，得到上述三維重建處理結果，包括：對上述深度圖處理結果進行表面重建處理，得到表面重建處理結果；對上述表面重建處理結果進行紋理貼圖處理，得到三維重建處理結果，其中，上述三維重建處理結果包括：三維重建模型。

可選的，在上述稀疏重建處理的過程中，上述特征點處理及匹配處理的對象為上述待重建目標；在上述稠密重建處理的過程中，上述深度圖處理的對象為上述待重建目標，其中，上述深度圖處理包括：光度一致性檢測和代價聚合優(yōu)化。

根據本公開的另一方面，提供了一種三維重建處理裝置，包括：第一獲取模塊，用于獲取目標圖像，其中，上述目標圖像中包含：待重建目標；第二獲取模塊，用于基于上述待重建目標獲取上述目標圖像的背景蒙版圖像；處理模塊，用于基于上述背景蒙版圖像對上述待重建目標進行三維重建處理，得到三維重建處理結果。

可選的，上述第二獲取模塊，包括：確定單元，用于基于上述待重建目標確定上述目標圖像中的背景區(qū)域，其中，上述待重建目標為上述目標圖像中的非背景區(qū)域；第一處理單元，用于對上述目標圖像中的上述背景區(qū)域進行蒙版處理，得到上述背景蒙版圖像。