[發明專利]圖像處理方法、裝置、電子設備及存儲介質

在審

• 申請號: 202010608415.2
• 申請日: 2020-06-29
• 公開（公告）號: CN113936026A
• 公開（公告）日: 2022-01-14
• 發明（設計）人: 李虎
• 申請（專利權）人: 北京金山云網絡技術有限公司
• 主分類號: G06T7/194
• 分類號: G06T7/194;G06T7/13;G06T7/50;G06T5/30;G06N3/08
• 代理公司: 北京柏杉松知識產權代理事務所(普通合伙) 11413
• 代理人: 馬敬;丁蕓

1.一種圖像處理方法，其特征在于，所述方法包括：

獲取待處理的可見光圖像及所述可見光圖像對應的深度圖像，其中，所述可見光圖像中包括待處理目標；

根據所述待處理目標在所述可見光圖像中的位置區域，確定替換圖案的形狀及目標替換區域；

根據所述目標替換區域及所述深度圖像，計算所述目標替換區域各點的法向量分量，其中，每個所述點對應一個或多個像素點；

根據所述目標替換區域各點的法向量分量，對所述替換圖案的形狀進行調整，得到目標圖案；

將所述目標圖案覆蓋到所述可見光圖像的所述目標替換區域中。

2.根據權利要求1所述的方法，其特征在于，所述根據所述待處理目標在所述可見光圖像中的位置區域，確定替換圖案的形狀及目標替換區域，包括：

根據所述可見光圖像的三分圖和所述可見光圖像，確定所述待處理目標在所述可見光圖像中的位置區域，作為待處理目標區域，其中，所述三分圖包括前景像素、背景像素以及不確定區域像素；

根據所述待處理目標區域中的關鍵點，確定目標替換區域及替換圖案的形狀。

3.根據權利要求2所述的方法，其特征在于，所述根據所述可見光圖像的三分圖和所述可見光圖像，確定所述待處理目標在所述可見光圖像中的位置區域，作為待處理目標區域，包括：

對所述可見光圖像進行前景像素及背景像素的分割，得到分割圖像，其中，所述待處理目標對應所述前景像素；

對所述分割圖像進行邊緣檢測，確定所述前景像素的邊緣圖像區域；

在所述分割圖像中對所述邊緣圖像區域進行膨脹操作，得到不確定區域像素；

將包括所述前景像素、所述背景像素以及所述不確定區域像素的三分圖及所述可見光圖像輸入到預先訓練的深度神經網絡中進行分析，得到所述待處理目標在所述可見光圖像中的位置區域，作為待處理目標區域。

4.根據權利要求1所述的方法，其特征在于，所述根據所述目標替換區域及所述深度圖像，計算所述目標替換區域各點的法向量分量，包括：

根據所述深度圖像，確定所述目標替換區域中各點的深度信息；

針對所述目標替換區域中的每一點，以當前點為圓心，預設長度為半徑確定所述當前點的領域范圍；

根據所述當前點的領域范圍內各點的深度信息，將所述當前點的領域范圍內的各點擬合為一個局部平面；

計算所述當前點的局部平面的法向量分量，作為所述當前點的法向量分量，進而得到所述目標替換區域中各點的法向量分量。

5.根據權利要求1所述的方法，其特征在于，所述目標替換區域中各點的法向量分量包括所述可見光圖像的二維坐標系方向上的橫縱坐標分量；

所述根據所述目標替換區域各點的法向量分量，對所述替換圖案的形狀進行調整，得到目標圖案，包括：

根據所述目標替換區域中各點的橫縱坐標分量的方向及長度，確定所述替換圖案中各相應的點的形變方向及形變強度；

按照所述替換圖案中各相應的點的形變方向及形變強度，對所述替換圖案中的各點進行調整，得到目標圖案。

6.一種圖像處理裝置，其特征在于，所述裝置包括：

圖像獲取模塊，用于獲取待處理的可見光圖像及所述可見光圖像對應的深度圖像，其中，所述可見光圖像中包括待處理目標；

區域確定模塊，用于根據所述待處理目標在所述可見光圖像中的位置區域，確定替換圖案的形狀及目標替換區域；

法向量分量計算模塊，用于根據所述目標替換區域及所述深度圖像，計算所述目標替換區域各點的法向量分量，其中，每個所述點對應一個或多個像素點；

圖像形變處理模塊，用于根據所述目標替換區域各點的法向量分量，對所述替換圖案的形狀進行調整，得到目標圖案；

目標區域替換模塊，用于將所述目標圖案覆蓋到所述可見光圖像的所述目標替換區域中。