[發明專利]基于GLD-GAN的不規則人臉矯正方法、系統及介質

有效

• 申請號: 201910575810.2
• 申請日: 2019-06-28
• 公開（公告）號: CN110363116B
• 公開（公告）日: 2021-07-23
• 發明（設計）人: 孫錟鋒;蔣興浩;許可;陸翼龍
• 申請（專利權）人: 上海交通大學
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G06T3/00;G06T3/40;G06T5/00;G06T7/11;G06T7/90
• 代理公司: 上海漢聲知識產權代理有限公司 31236
• 代理人: 莊文莉

1.一種基于GLD-GAN的不規則人臉矯正方法，其特征在于，包括：

步驟S1：識別并截取圖像中的人臉，獲得人臉圖P₀；

步驟S2：根據獲得的人臉圖P₀，采用基于CRF-RNN的圖像分割技術剔除背景冗余；

步驟S3：采用Inception模型進行圖像分類，將側臉按照角度分為多個類；

步驟S4：訓練每個類的GLD-GAN模型；

步驟S5：將側臉圖像輸入GLD-GAN模型，得到正臉圖像a；

步驟S6：將側臉圖像輸入到開源的TP-GAN得到正臉圖像b；

步驟S7：根據a∶b＝3∶1的比例融合正臉圖像a與b，并將融合的正臉替換圖像b中的正臉，得到正臉圖像c；

步驟S8：采用雙邊濾波算法進行優化調整得到的正臉圖像c；

步驟S9：訓練超分辨率網絡SRGAN；

步驟S10：利用SRGAN將正臉圖像c超分辨率處理。

2.根據權利要求1所述的基于GLD-GAN的不規則人臉矯正方法，其特征在于，所述步驟S1包括：

步驟S101：檢測圖像中是否有人臉：若有，則進入步驟S102繼續執行，否則，跳出當前循環并報告未檢測到人臉的錯誤；

步驟S102：根據檢測計算出其五官坐標和對應的邊界框(bounding box)；

步驟S103：在計算出的五官坐標中首先定位鼻子的位置，并確保鼻子為截取的人臉圖的中軸線，根據中軸線調整邊界框的位置，并截取邊界框作為新的人臉圖P₀；

所述步驟S102：

利用基于dlib的開源庫face_recognition，讀取圖像并識別分析人臉，并返回其五官的坐標和邊界框；

所述步驟S103，所述根據中軸線調整邊界框的位置：

記right為原邊界框的右邊界坐標，left為原邊界框的左邊界坐標，記原中軸線坐標x＝(right-left)/2，記鼻子的橫坐標為mid，若x＞mid，則right＝right-(x-mid)，left不變；若x＜mid，則left＝left+(mid-x)，right不變；若x＝mid，則不進行操作。