[發明專利]圖像處理方法、裝置以及電子設備

在審

• 申請號: 202110049139.5
• 申請日: 2021-01-14
• 公開（公告）號: CN112837219A
• 公開（公告）日: 2021-05-25
• 發明（設計）人: 王錫浩;黃晗;郭彥東
• 申請（專利權）人: OPPO廣東移動通信有限公司
• 主分類號: G06T3/40
• 分類號: G06T3/40;G06T5/50;H04N5/232
• 代理公司: 深圳市智圈知識產權代理事務所(普通合伙) 44351
• 代理人: 苗燕

本申請實施例公開了一種圖像處理方法、裝置以及電子設備。方法包括：獲取第一深度圖像以及與第一深度圖像對應的彩色圖像；對第一深度圖像進行插值處理，得到參考深度圖像；基于參考深度圖像得到對應的數據保真約束函數，以及基于參考深度圖像以及彩色圖像得到平滑特性約束函數；基于數據保真約束函數以及平滑特性約束函數，得到深度圖像表達函數；基于最優化方式獲取深度圖像表達函數對應的解，以得到參考深度圖像中每個像素對應的更新后的深度值，并基于更新后的深度值得到第二深度圖像。該方法實現了在原本的深度圖像分辨率交底的情況下，可以通過與原本的深度圖像對應的彩色圖像來實現對原本的深度圖像進行分辨率提升。

技術領域

本申請涉及圖像處理技術領域，更具體地，涉及一種圖像處理方法、裝置以及電子設備。

背景技術

在電子設備配置有圖像采集裝置后，電子設備可以通過該圖像采集裝置來進行圖像采集。例如，拍攝圖片或者錄制視頻等。而隨著圖像采集裝置的升級，部分圖像采集裝置可以采集深度圖像，但是相關的圖像采集裝置所采集的深度圖像的通常存在分辨率低下的問題。

發明內容

鑒于上述問題，本申請提出了一種圖像處理方法、裝置以及電子設備，以實現改善上述問題。

第一方面，本申請提供了一種圖像處理方法，應用于電子設備，所述方法包括：獲取第一深度圖像以及與所述第一深度圖像對應的彩色圖像；對所述第一深度圖像進行插值處理，得到參考深度圖像；基于所述參考深度圖像得到對應的數據保真約束函數，以及基于所述參考深度圖像以及所述彩色圖像得到平滑特性約束函數；基于所述數據保真約束函數以及所述平滑特性約束函數，得到深度圖像表達函數；基于最優化方式獲取所述深度圖像表達函數對應的解，以得到參考深度圖像中每個像素對應的更新后的深度值，并基于所述更新后的深度值得到第二深度圖像。

第二方面，本申請提供了一種圖像處理裝置，運行于電子設備，所述裝置包括：圖像輸入單元，用于獲取第一深度圖像以及與所述第一深度圖像對應的彩色圖像；插值處理單元，用于對所述第一深度圖像進行插值處理，得到參考深度圖像；第一函數生成單元，用于基于所述參考深度圖像得到對應的數據保真約束函數，以及基于所述參考深度圖像以及所述彩色圖像得到平滑特性約束函數；第二函數生成單元，用于基于所述數據保真約束函數以及所述平滑特性約束函數，得到深度圖像表達函數；圖像處理單元，用于基于最優化方式獲取所述深度圖像表達函數對應的解，以得到參考深度圖像中每個像素對應的更新后的深度值，并基于所述更新后的深度值得到第二深度圖像。

第三方面，本申請提供了一種電子設備，包括一個或多個處理器以及存儲器；一個或多個程序被存儲在所述存儲器中并被配置為由所述一個或多個處理器執行，所述一個或多個程序配置用于執行上述的方法。

第四方面，本申請提供的一種計算機可讀存儲介質，所述計算機可讀存儲介質中存儲有程序代碼，其中，在所述程序代碼運行時執行上述的方法。

本申請提供的一種圖像處理方法、裝置以及電子設備，在獲取第一深度圖像以及與所述第一深度圖像對應的彩色圖像后，對所述第一深度圖像進行插值處理，得到參考深度圖像，然后基于所述參考深度圖像得到對應的數據保真約束函數，以及基于所述參考深度圖像以及所述彩色圖像得到平滑特性約束函數，進而基于所述數據保真約束函數以及所述平滑特性約束函數，得到深度圖像表達函數，最終基于最優化方式獲取所述深度圖像表達函數對應的解，以得到參考深度圖像中每個像素對應的更新后的深度值，并基于所述更新后的深度值得到第二深度圖像。

從而通過上述方式可以使得在得到第一深度圖像以及與所述第一深度圖像對應的彩色圖像后，可以得到分辨率提升后的第二深度圖像，進而實現了在原本的深度圖像分辨率交底的情況下，可以通過與原本的深度圖像對應的彩色圖像來實現對原本的深度圖像進行分辨率提升。

附圖說明