[發明專利]圖像處理方法、裝置、電子設備、介質和計算機程序產品

在審

• 申請號: 202110246097.4
• 申請日: 2021-03-05
• 公開（公告）號: CN112967197A
• 公開（公告）日: 2021-06-15
• 發明（設計）人: 王詩吟;周強
• 申請（專利權）人: 北京字跳網絡技術有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06N3/08
• 代理公司: 北京開陽星知識產權代理有限公司 11710
• 代理人: 祝樂芳

1.一種圖像的處理方法，其特征在于，包括：

獲取原始圖像中的目標對象的可見區域的第一掩碼，其中，所述原始圖像中包含目標對象，所述目標對象部分區域被遮擋物遮擋；

將所述原始圖像和所述第一掩碼堆疊后輸入目標神經網絡模型中，得到所述原始圖像中的目標對象的目標完整掩碼，其中，所述目標神經網絡模型基于原始圖像樣本、目標對象樣本的預設解析掩碼以及目標對象樣本的參考完整掩碼訓練得到的，所述原始圖像樣本中包含所述目標對象樣本，所述目標對象樣本的部分區域被遮擋物遮擋，所述預設解析掩碼包含所述目標對象樣本的各部分的語義掩碼標簽。

2.根據權利要求1所述的方法，其特征在于，還包括：

將所述目標對象的目標完整掩碼減去所述第一掩碼，得到所述目標對象的不可見區域的掩碼。

3.根據權利要求1所述的方法，其特征在于，所述將所述原始圖像和所述第一掩碼堆疊后輸入目標神經網絡模型中之后，還包括：

輸出所述原始圖像中的目標對象的完整解析掩碼，所述完整解析掩碼包含所述目標對象的各部分的語義掩碼標簽。

4.根據權利要求3所述的方法，其特征在于，還包括：

將所述目標對象的目標完整掩碼減去所述第一掩碼，得到所述目標對象的不可見區域的掩碼；

將所述目標對象的不可見區域的掩碼與所述目標對象的完整解析掩碼相乘，得到所述目標對象的不可見區域的語義掩碼標簽。

5.根據權利要求1-4任一項所述的方法，其特征在于，所述獲取原始圖像中的目標對象的可見區域的第一掩碼之前，還包括：

獲取所述原始圖像樣本中的目標對象樣本的第二掩碼；

將所述原始圖像樣本和所述第二掩碼輸入神經網絡模型中，得到所述原始圖像樣本中的目標對象樣本的目標完整掩碼和所述目標對象樣本的完整解析掩碼；

將所述目標對象樣本的參考完整掩碼和所述目標對象樣本的預設解析掩碼作為監督信號，利用所述監督信號及所述目標對象樣本的目標完整掩碼和所述目標對象樣本的完整解析掩碼得到損失函數，對所述神經網絡模型進行訓練，直到所述神經網絡模型收斂，將收斂后的神經網絡模型作為所述目標神經網絡模型。

6.根據權利要求5所述的方法，其特征在于，還包括：

將所述原始圖像樣本輸入目標對象解析網絡模型中，得到所述目標對象樣本的預設解析掩碼。

7.一種圖像處理裝置，其特征在于，所述裝置包括：

獲取模塊，用于獲取原始圖像中的目標對象的可見區域的第一掩碼，其中，所述原始圖像中包含目標對象，所述目標對象部分區域被遮擋物遮擋；

處理模塊，用于將所述原始圖像和所述第一掩碼堆疊后輸入目標神經網絡模型中，得到所述原始圖像中的目標對象的目標完整掩碼，其中，所述目標神經網絡模型基于原始圖像樣本、目標對象樣本的預設解析掩碼以及目標對象樣本的參考完整掩碼訓練得到的，所述原始圖像樣本中包含所述目標對象樣本，所述目標對象樣本的部分區域被遮擋物遮擋，所述預設解析掩碼包含所述目標對象樣本的各部分的語義掩碼標簽。

8.一種電子設備，其特征在于，包括：處理器，所述處理器用于執行存儲于存儲器的計算機程序，所述計算機程序被處理器執行時實現權利要求1-6任一項所述的方法的步驟。

9.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于，所述計算機程序被處理器執行時實現權利要求1-6任一項所述的方法的步驟。

10.一種計算機程序產品，其特征在于，當所述計算機程序產品在計算機上運行時，使得所述計算機執行如權利要求1-6任一項所述的圖像處理方法。