[發明專利]圖像處理方法、裝置及系統、電子設備

在審

• 申請號: 202010189327.3
• 申請日: 2020-03-17
• 公開（公告）號: CN111325698A
• 公開（公告）日: 2020-06-23
• 發明（設計）人: 張亞馳;劉一膠;王競暉;劉江宇
• 申請（專利權）人: 北京邁格威科技有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06T7/11;G06T7/187;G06K9/00;G06K9/34;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 董艷芳

本發明提供了一種圖像處理方法、裝置及系統、電子設備，涉及圖像處理技術領域，該方法包括：對目標圖像進行區域分割，得到目標圖像中的目標區域；將目標圖像及目標圖像的目標區域輸入圖像處理模型，以使圖像處理模型對目標圖像的目標區域進行圖像處理，得到目標圖像對應的處理后圖像。本發明能夠有效去除夜景下自拍時發光物體導致的自拍圖像中的眼鏡鏡片反光，提升了夜晚的拍照質量及用戶體驗。

技術領域

本發明涉及圖像處理技術領域，尤其是涉及一種圖像處理方法、裝置及系統、電子設備。

背景技術

眼鏡鏡片反光的產生原因是環境物體或手機屏幕反射的光會映射到眼鏡鏡片上。實際上常見的玻璃透明物體在拍照時都會將環境物體映射到玻璃上，這樣就會影響拍攝效果，尤其在夜景中自拍時，眼鏡鏡片上可能會出現手機屏幕的反光，這些反光顏色遮擋了眼睛，與背景差別大，較為明亮，很影響照片的觀感。隨著使用眼鏡的人群的比例增高，夜景拍照中眼鏡反光去除的需求也越來越大，因此眼鏡的反光去除也逐漸成為智能手機拍照應用中重要的功能之一。目前有不少工作在致力于解決玻璃反光的問題，然而，夜景下自拍時眼鏡鏡片反光相比一般玻璃反光遮擋更強，需要專門的處理算法，但是目前還沒有專門來處理眼鏡鏡片反光的解決辦法。因此，如何消除夜晚自拍圖像中的眼鏡鏡片反光成為亟待解決的問題。

發明內容

有鑒于此，本發明的目的在于提供一種圖像處理方法、裝置及系統、電子設備，能夠有效去除夜景下自拍時發光物體導致的自拍圖像中的眼鏡鏡片反光，提升了夜晚的拍照質量及用戶體驗。

為了實現上述目的，本發明實施例采用的技術方案如下：

第一方面，本發明實施例提供了一種圖像處理方法，包括：對目標圖像進行區域分割，得到所述目標圖像中的目標區域；將所述目標圖像及所述目標圖像的目標區域輸入圖像處理模型，以使所述圖像處理模型對所述目標圖像的目標區域進行圖像處理，得到所述目標圖像對應的處理后圖像。

進一步，本發明實施例提供了第一方面的第一種可能的實施方式，其中，所述對目標圖像進行區域分割，得到所述目標圖像中的目標區域的步驟，包括：利用關鍵點檢測模型對目標圖像進行關鍵點檢測，確定所述目標圖像中的待分割區域；利用語義分割模型對所述目標圖像中的所述待分割區域進行語義分割，得到所述目標圖像中的目標區域。

進一步，本發明實施例提供了第一方面的第二種可能的實施方式，其中，所述對目標圖像進行區域分割，得到所述目標圖像中的目標區域的步驟，包括：對所述目標圖像進行關鍵點檢測，得到關鍵點檢測結果；對所述目標圖像中所述關鍵點檢測結果所在區域進行語義分割，得到所述目標圖像中的目標區域。

進一步，本發明實施例提供了第一方面的第三種可能的實施方式，其中，所述語義分割模型包括第一語義分割模型和第二語義分割模型，所述目標區域包括所述目標圖像中的反光區域；所述利用語義分割模型對所述目標圖像中的待分割區域進行語義分割，得到所述目標圖像中的目標區域的步驟，包括：利用所述第一語義分割模型從所述目標圖像的待分割區域中分割出鏡面區域；其中，所述第一語義分割模型是基于預先標記出鏡面區域的樣本訓練得到的；利用所述第二語義分割模型對所述目標圖像的鏡面區域進行語義分割，得到所述目標圖像的反光區域；其中，所述第二語義分割模型是基于預先標記出反光區域的樣本訓練得到的。

進一步，本發明實施例提供了第一方面的第四種可能的實施方式，其中，所述關鍵點檢測模型的訓練過程包括：將預先標注有所述待分割區域的關鍵點的訓練樣本輸入關鍵點檢測模型，基于所述訓練樣本對所述關鍵點檢測模型進行訓練，得到訓練后的關鍵點檢測模型。

進一步，本發明實施例提供了第一方面的第五種可能的實施方式，其中，所述目標區域包括圖像中的反光區域；所述對所述目標圖像的目標區域進行圖像處理，得到所述目標圖像對應的處理后圖像的步驟，包括：對所述目標圖像中的反光區域進行圖像恢復以消除所述目標圖像中的反光區域，得到所述目標圖像對應的處理后的圖像。