[發明專利]人臉圖像增強方法、裝置、計算機設備及存儲介質

在審

• 申請號: 202211564137.0
• 申請日: 2022-12-07
• 公開（公告）號: CN115861107A
• 公開（公告）日: 2023-03-28
• 發明（設計）人: 鄭金云
• 申請（專利權）人: 深圳萬興軟件有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06V40/16;G06T3/00
• 代理公司: 深圳市精英專利事務所 44242
• 代理人: 戴艷艷

本發明實施例公開了一種人臉圖像增強方法、裝置、計算機設備及存儲介質，其涉及圖像處理技術領域。其中，所述方法包括：對待處理的低質圖像進行人臉關鍵點檢測得到人臉關鍵點坐標及人臉裁剪區域坐標；根據人臉關鍵點坐標及人臉裁剪區域坐標對待處理的低質圖像進行預處理得到人臉裁剪目標圖像；根據人臉關鍵點坐標對人臉裁剪目標圖像進行仿射變換得到人臉矯正圖像；對人臉矯正圖像進行修復、逆變換以及人臉分割得到人臉圖像；對待處理的低質圖像進行超分處理得到超分圖像，并根據超分圖像及人臉圖像生成初始增強圖像；對初始增強圖像進行增強處理得到目標增強圖像。本申請實施例可提高低質圖像中的人臉圖像增強效果。

技術領域

本發明實施例涉及圖像處理技術領域，尤其涉及一種人臉圖像增強方法、裝置、計算機設備及存儲介質。

背景技術

圖像作為重要的多媒體信息媒介蘊含豐富的信息，已經密切的融入現代人類的日常生活中，尤其帶有人臉的圖像，對于大眾來說更具有紀念收藏意義。但往往受到硬件設備(包含采集、傳輸、存儲等)的限制和圖像采集環境的影響，或者圖像在存儲及傳輸的過程中，由于設備的存儲空間和傳輸線路帶寬的限制，壓縮帶來的信息損失等原因，導致人們獲取的圖像往往存在不同程度的退化，造成圖像信息的損失，從而形成各類低質圖像。為了從低質量人臉圖像中恢復出具有逼真紋理的高質量人臉圖像，人們提出了許多基于空間transformer網絡的方法，這些方法在人工合成的低質量人臉上顯示了令人印象深刻的結果；然而，卻無法處理真實的低質量面部圖像。基于生成對抗網絡(GAN)的方法可以對真實的低質量面部圖像進行增強處理，但又往往容易產生過度平滑的效果。因此，現有對低質圖像的人臉圖像增強效果較差。

發明內容

本發明實施例提供了一種人臉圖像增強方法、裝置、計算機設備及存儲介質，旨在解決現有低質圖像的人臉圖像增強效果較差的問題。

第一方面，本發明實施例提供了一種人臉圖像增強方法，其包括：對待處理的低質圖像進行人臉關鍵點檢測得到人臉關鍵點坐標及人臉裁剪區域坐標；根據所述人臉關鍵點坐標及所述人臉裁剪區域坐標對所述待處理的低質圖像進行預處理得到人臉裁剪目標圖像；根據所述人臉關鍵點坐標對所述人臉裁剪目標圖像進行仿射變換得到人臉矯正圖像；對所述人臉矯正圖像進行修復得到人臉修復圖像，并對所述人臉修復圖像進行逆變換及人臉分割得到人臉圖像；對所述待處理的低質圖像進行超分處理得到超分圖像，并根據所述超分圖像及所述人臉圖像生成初始增強圖像；對所述初始增強圖像進行增強處理得到目標增強圖像。

進一步地，根據所述第一裁剪坐標及所述第二裁剪坐標確定裁剪寬度和裁剪高度；根據所述裁剪高度、所述裁剪寬度以及所述人臉關鍵點坐標對所述待處理的低質圖像進行裁剪得到人臉裁剪圖像；將所述人臉裁剪圖像縮放至預設尺寸得到人臉裁剪目標圖像。

進一步地，計算所述左眼坐標與所述右眼坐標之間的中心距離得到第一中心位置；計算所述左嘴角坐標與所述右嘴角坐標之間的中心距離得到第二中心位置；計算所述第一中心位置與所述第二中心位置之間的距離得到所述中部裁剪高度；根據所述中部裁剪高度、所述頂部裁剪高度、所述底部裁剪高度以及所述裁剪寬度對所述待處理的低質圖像進行裁剪得到人臉裁剪圖像。

進一步地，根據所述人臉關鍵點坐標及預設人臉關鍵點坐標確定變換矩陣；根據所述變換矩陣對所述人臉裁剪目標圖像進行仿射變換得到人臉矯正圖像。

進一步地，對所述變換矩陣進行逆變換得到逆矩陣，并根據所述逆矩陣對所述人臉修復圖像進行逆變換得到人臉目標修復圖像；通過人臉分割方法對所述人臉目標修復圖像進行人臉分割得到人臉圖像。

進一步地，通過超分辨網絡對所述待處理的低質圖像進行超分處理得到超分圖像；識別所述超分圖像中的人臉區域；將所述人臉圖像貼回至所述人臉區域生成初始增強圖像。

進一步地，通過直方圖均衡化算法對所述目標圖像進行對比度增強處理得到目標增強圖像。