[發明專利]圖像處理方法及裝置、計算機可讀存儲介質和電子設備

在審

• 申請號: 202010796552.3
• 申請日: 2020-08-10
• 公開（公告）號: CN111815666A
• 公開（公告）日: 2020-10-23
• 發明（設計）人: 樊歡歡;李姬俊男
• 申請（專利權）人: OPPO廣東移動通信有限公司
• 主分類號: G06T7/194
• 分類號: G06T7/194;G06T15/00;G06T19/00
• 代理公司: 深圳市隆天聯鼎知識產權代理有限公司 44232
• 代理人: 劉抗美

1.一種圖像處理方法，其特征在于，包括：

獲取二維圖像，對所述二維圖像進行語義分割，確定所述二維圖像的前景區域和背景區域；

確定所述背景區域的深度信息；

利用所述背景區域的像素信息和深度信息，確定遮擋區域的像素信息和深度信息；其中，所述遮擋區域的位置與所述前景區域在所述二維圖像上的位置對應；

結合所述遮擋區域的像素信息和深度信息，生成與所述二維圖像對應的三維圖像。

2.根據權利要求1所述的圖像處理方法，其特征在于，利用所述背景區域的像素信息和深度信息，確定遮擋區域的像素信息和深度信息，包括：

對所述背景區域的像素信息和深度信息進行特征提取，生成中間信息；

對所述中間信息執行像素信息預測過程，以確定所述遮擋區域的像素信息；

對所述中間信息執行深度信息預測過程，以確定所述遮擋區域的深度信息。

3.根據權利要求2所述的圖像處理方法，其特征在于，在確定遮擋區域的像素信息和深度信息之前，所述圖像處理方法還包括：

確定所述前景區域的深度信息；

基于所述前景區域的深度信息和所述背景區域的深度信息，確定所述前景區域與所述背景區域的深度差；

將所述深度差與深度閾值進行比較；

其中，如果所述深度差大于所述深度閾值，則執行確定遮擋區域的像素信息和深度信息的過程。

4.根據權利要求1所述的圖像處理方法，其特征在于，結合所述遮擋區域的像素信息和深度信息，生成與所述二維圖像對應的三維圖像，包括：

獲取所述前景區域的像素信息和深度信息；

結合所述遮擋區域的像素信息和深度信息以及所述前景區域的像素信息和深度信息，生成與所述二維圖像對應的三維圖像。

5.根據權利要求4所述的圖像處理方法，其特征在于，結合所述遮擋區域的像素信息和深度信息以及所述前景區域的像素信息和深度信息，生成與所述二維圖像對應的三維圖像，包括：

利用所述遮擋區域的像素信息和深度信息以及所述前景區域的像素信息和深度信息，生成所述前景區域對應對象的三維圖像，作為與所述二維圖像對應的三維圖像。

6.根據權利要求4所述的圖像處理方法，其特征在于，結合所述遮擋區域的像素信息和深度信息以及所述前景區域的像素信息和深度信息，生成與所述二維圖像對應的三維圖像，包括：

利用所述遮擋區域的像素信息和深度信息、所述前景區域的像素信息和深度信息以及所述背景區域的像素信息和深度信息，生成與所述二維圖像對應的三維圖像。

7.根據權利要求1所述的圖像處理方法，其特征在于，確定所述背景區域的深度信息包括：

對所述二維圖像進行深度估計，并基于深度估計的結果確定所述背景區域的深度信息。

8.根據權利要求7所述的圖像處理方法，其特征在于，在對所述二維圖像進行深度估計之前，所述圖像處理方法還包括：

識別所述前景區域內是否包含目標對象；

其中，如果所述前景區域包含目標對象，則對所述二維圖像進行深度估計。

9.一種圖像處理裝置，其特征在于，包括：

語義分割模塊，用于獲取二維圖像，對所述二維圖像進行語義分割，確定所述二維圖像的前景區域和背景區域；

深度確定模塊，用于確定所述背景區域的深度信息；

遮擋信息確定模塊，用于利用所述背景區域的像素信息和深度信息，確定遮擋區域的像素信息和深度信息；其中，所述遮擋區域的位置與所述前景區域在所述二維圖像上的位置對應；

三維圖像生成模塊，用于結合所述遮擋區域的像素信息和深度信息，生成與所述二維圖像對應的三維圖像。

10.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于，所述程序被處理器執行時實現如權利要求1至8中任一項所述的圖像處理方法。

11.一種電子設備，其特征在于，包括：

處理器；

存儲器，用于存儲一個或多個程序，當所述一個或多個程序被所述處理器執行時，使得所述處理器實現如權利要求1至8中任一項所述的圖像處理方法。