[發明專利]基于位移場的自動液化實現方法

在審

• 申請號: 202010965772.4
• 申請日: 2020-09-15
• 公開（公告）號: CN112215742A
• 公開（公告）日: 2021-01-12
• 發明（設計）人: 沈鈺鋒;吳祥輝;王鐸皓;夏俊
• 申請（專利權）人: 杭州縵圖攝影有限公司
• 主分類號: G06T3/00
• 分類號: G06T3/00;G06T3/40;G06N3/08
• 代理公司: 杭州惟臻專利代理事務所(普通合伙) 33398
• 代理人: 陳輝

本發明公開了基于位移場的自動液化實現方法，涉及圖片修飾技術領域，具體為包括以下操作步驟：A、基于圖形生成液化位移場的深度學習模型；B、自動液化操作網絡訓練結構；C、自動液化操作網絡調整。該基于位移場的自動液化實現方法，自動調整照片中人像形態結構,自動進行人像修圖液化操作,可對人像發型,臉型,五官,脖子,肩膀,身形等進行液化操作,可根據人像的特性進行不同的修圖效果,保持人像的原有身份特性.使照片的整體的比例和諧,提升協調性。

技術領域

本發明涉及圖片修飾技術領域，具體為基于位移場的自動液化實現方法。

背景技術

Face landmark檢測器，即人臉特征檢測器，可以于圖片上的人體面部獲得控制點并形成位移場，位移場是指物體三維空間內的位移矢量的空間分布狀況，即控制點于圖像面部上的空間分布分布，控制點于位移場中進行移動從而對臉部圖像進行液化操作，從而實現瘦臉、五官調整等功能。

現有的圖像液化操作只能于面部獲得有限的控制點，只能控制臉部的瘦臉,五官調整,不能擴大調整范圍,無法針對發型,身形,脖子等更多的區域進行調整，且對于臉部瘦臉和五官調整方式以固定方向和距離進行,對于不同人的臉型的操作沒有差別,這導致不能保持人物原有的特性,人物瘦臉產生相同的效果。

發明內容

針對現有技術的不足，本發明提供了基于位移場的自動液化實現方法，解決了上述背景技術中提出現有的圖像液化操作只能于面部獲得有限的控制點，只能控制臉部的瘦臉,五官調整的問題,不能擴大調整范圍,無法針對發型,身形,脖子等更多的區域進行調整，且對于臉部瘦臉和五官調整方式以固定方向和距離進行,對于不同人的臉型的操作沒有差別,這導致不能保持人物原有的特性,人物瘦臉產生相同的效果的問題。

為實現以上目的，本發明通過以下技術方案予以實現：基于位移場的自動液化實現方法，包括以下操作步驟：

A、基于圖形生成液化位移場的深度學習模型；

B、自動液化操作網絡訓練結構；

C、自動液化操作網絡調整；

可選的，所述步驟A中基于圖形生成液化位移場的深度學習模型包括以下操作步驟：

A1、生成器通過對原始圖像與人工修圖后的圖像之間的差異值進行分類學習，差異值包括：五官、發型、肢體、服飾、光線、色彩、紋理等結構特征；

可選的，所述步驟B中自動液化操作網絡訓練結構包括以下操作步驟：

B1、基于A1中對結構特征的大量學習，將原始圖像導入生成器中；

B2、原始圖像為高清圖像，分辨率為3000*5000至5000*5000之間，通過對原始圖像下采樣縮小圖像尺寸，即將高分辨率降低至512*512；

B3、通過編碼器將原始圖像中的五官、發型、肢體、服飾、光線、色彩、紋理等結構特征提取并提取出提取物之間結構關系，再通過解碼器將提取物與至結構關系自適應歸一化并于64*64*2的位移場中形成控制點；

B4、基于A1中的修圖學習自動控制控制點于位移場移動進行修圖作業，同時基于B3已提取出的結構特征與結構之間的關系進行保留，再通過采用雙線值差的方式將修圖后的圖像從512*512的分辨率上采樣返回原始圖像的尺寸分辨率；

B5、基于B4中的原始圖像進行扭曲映射，即通過仿射變換將原始圖像扭曲得到液化后的圖像(此圖像稱為AI液化圖像)；

可選的，所述步驟C中自動液化操作網絡調整包括以下操作步驟：

C1、AI液化圖像與人工修圖后的圖像進行對比，并將兩者之間的差異值通過隨機梯度下降的方式對生產器的計算方式進行調整，直至AI液化圖像與人工修圖圖像之間的差異值降至最低。