[發明專利]用于生成圖像的方法和裝置

有效

• 申請號: 202010112247.8
• 申請日: 2020-02-24
• 公開（公告）號: CN111340865B
• 公開（公告）日: 2023-04-07
• 發明（設計）人: 謝檸蔚;陳睿智
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06T7/55
• 分類號: G06T7/55;G06T17/20;G06N3/0475;G06N3/08
• 代理公司: 北京英賽嘉華知識產權代理有限責任公司 11204
• 代理人: 王達佐;馬曉亞

1.一種用于生成圖像的方法，包括：

獲取針對目標人臉從至少兩個角度分別拍攝的圖像；

對所獲取的圖像進行風格遷移，得到所述目標人臉的二維線描圖；

將各個所述二維線描圖進行融合，并生成與融合結果對應的線描展開圖；

基于所述線描展開圖和預設三維人臉模型，生成所述目標人臉的三維線描圖。

2.根據權利要求1所述的方法，其中，所述對所獲取的圖像進行風格遷移，得到所述目標人臉的二維線描圖，包括：

將所獲取的圖像輸入預先訓練的生成對抗網絡，得到從所述生成對抗網絡輸出的、所述目標人臉的二維線描圖。

3.根據權利要求2所述的方法，其中，所述生成對抗網絡包括生成器，所述生成器包括預設數量的子生成器，對于包含人臉的圖像中的每個預設局部，存在用于處理該預設局部的所述子生成器；

所述將所獲取的圖像輸入預先訓練的生成對抗網絡，得到從所述生成對抗網絡輸出的、所述目標人臉的二維線描圖，包括：

對所獲取的圖像進行分割，得到所獲取的圖像中所述預設數量的預設局部；

對于每個所得到的預設局部，將該預設局部輸入到用于處理該預設局部的所述子生成器中，得到該預設局部對應的局部二維線描圖，其中，在所述生成對抗網絡的訓練過程中，每個子生成器學習該子生成器對應的預設局部的特征；

對所得到的各個局部二維線描圖進行融合，生成從所述生成對抗網絡輸出的、所述目標人臉的二維線描圖。

4.根據權利要求2所述的方法，其中，所述生成對抗網絡包括生成器和判別器；

所述生成對抗網絡通過以下方式訓練得到：

將訓練樣本中的人臉圖像輸入所述生成器，得到從所述生成器輸出的、所述人臉圖像對應的二維線描圖，其中，所述訓練樣本還包括所述人臉圖像對應的參考二維線描圖；

將輸出的二維線描圖和所述參考二維線描圖輸入所述判別器，利用所述判別器，判斷輸出的二維線描圖和所述參考二維線描圖是否為同類圖像；

若判斷輸出的二維線描圖和所述參考二維線描圖不為同類圖像，則基于輸出的二維線描圖和所述參考二維線描圖訓練所述生成器；

若判斷輸出的二維線描圖和所述參考二維線描圖為同類圖像，則將當前的生成對抗網絡作為訓練后的生成對抗網絡。

5.根據權利要求1所述的方法，其中，所述基于所述線描展開圖和預設三維人臉模型，生成所述目標人臉的三維線描圖，包括：

在所述線描展開圖中，確定出包含預設五官的局部線描展開圖；

基于所述局部線描展開圖和所述預設三維人臉模型，生成所述目標人臉的三維線描圖。

6.根據權利要求5所述的方法，其中，所述基于所述局部線描展開圖和所述預設三維人臉模型，生成所述目標人臉的三維線描圖，包括：

將所述局部線描展開圖的底色更新為預設顏色，其中，所述局部線描展開圖的底色與所述預設顏色不同；

將更新后的局部線描展開圖與所述預設三維人臉模型結合，得到所述目標人臉的三維線描圖。

7.一種用于生成圖像的裝置，包括：

獲取單元，被配置成獲取針對目標人臉從至少兩個角度分別拍攝的圖像；

風格遷移單元，被配置成對所獲取的圖像進行風格遷移，得到所述目標人臉的二維線描圖；

第一生成單元，被配置成將各個所述二維線描圖進行融合，并生成與融合結果對應的線描展開圖；

第二生成單元，被配置成基于所述線描展開圖和預設三維人臉模型，生成所述目標人臉的三維線描圖。

8.根據權利要求7所述的裝置，其中，所述風格遷移單元，進一步被配置成按照如下方式執行所述對所獲取的圖像進行風格遷移，得到所述目標人臉的二維線描圖：

將所獲取的圖像輸入預先訓練的生成對抗網絡，得到從所述生成對抗網絡輸出的、所述目標人臉的二維線描圖。