[發明專利]圖像處理方法、圖像合成模型的確定方法、系統及設備

在審

• 申請號: 202111162107.2
• 申請日: 2021-09-30
• 公開（公告）號: CN114004772A
• 公開（公告）日: 2022-02-01
• 發明（設計）人: 趙帥帥
• 申請（專利權）人: 阿里巴巴（中國）有限公司
• 主分類號: G06T5/50
• 分類號: G06T5/50;G06T7/10;G06N3/04;G06N3/08
• 代理公司: 北京太合九思知識產權代理有限公司 11610
• 代理人: 劉戈;柴艷波

1.一種圖像處理方法，其特征在于，包括：

響應于用戶的操作，獲取第一圖像及第二圖像；

確定第一圖像合成模型，其中，所述第一圖像合成模型通過訓練過程學習第二圖像合成模型的圖像合成結果，所述第二圖像合成模型為預先訓練好的模型；

將所述第一圖像及所述第二圖像輸入完成訓練的所述第一圖像合成模型，輸出合成圖像；

顯示所述合成圖像。

2.根據權利要求1所述方法，其特征在于，所述第一圖像合成模型包括：空間變換網絡模塊及圖像合成網絡模塊，以及

將所述第一圖像及所述第二圖像輸入所述第一圖像合成模型輸出合成圖像，包括：

將所述第一圖像及所述第二圖像輸入所述空間變換網絡模塊，輸出參照所述第一圖像對所述第二圖像中的至少部分像素點進行坐標變換后的中間圖像；

將所述中間圖像及所述第一圖像輸入所述圖像合成網絡模塊，輸出所述合成圖像；

其中，所述圖像合成網絡模塊與所述第二圖像合成模型共用至少部分參數。

3.根據權利要求1或2所述的方法，其特征在于，確定所述第一圖像合成模型，包括：

獲取預先訓練好的第二圖像合成模型、待訓練的第一圖像合成模型及訓練樣本；其中，所述訓練樣本包括第一樣本圖、第一樣本圖關聯的至少一個第一特征圖、第二樣本圖、第二樣本圖關聯的至少一個第二特征圖、第三樣本圖、第四樣本圖；所述第一樣本圖與所述第二樣本圖經合成能得到與所述第三樣本圖的圖內容相關的合成圖；所述第四樣本圖與所述第三樣本圖經合成能得到與所述第一樣本圖的圖內容相關的合成圖；

將所述第一樣本圖、所述至少一個第一特征圖、所述第二樣本圖及所述至少一個第二特征圖輸入所述第二圖像合成模型以參考所述至少一個第一特征圖及所述至少一個第二特征圖對所述第一樣本圖和所述第二樣本圖進行合成處理，得到第一輸出圖；

將所述第一輸出圖、所述第三樣本圖及所述第四樣本圖輸入所述第一圖像合成模型，輸出用于知識蒸餾的第二輸出圖；

基于所述第二輸出圖與所述第一樣本圖，對所述第一圖像合成模型進行優化。

4.根據權利要求3所述的方法，其特征在于，所述至少一個第一特征圖包括如下中的至少一項：采用至少一種分割方法對所述第一樣本圖進行分割得到的至少一個分割圖，所述第一樣本圖的特征點分布圖；

所述至少一個第二特征圖包括如下中的至少一項：采用至少一種分割方法對所述第二樣本圖進行分割得到的至少一個分割圖。

5.根據權利要求3所述的方法，其特征在于，所述第一圖像合成模型包括：空間變換網絡模塊及圖像合成網絡模塊，以及

將所述第一輸出圖、所述第三樣本圖及所述第四樣本圖輸入所述第一圖像合成模型，輸出用于知識蒸餾的第二輸出圖，包括：

將所述第三樣本圖及所述第四樣本圖輸入所述空間變換網絡模塊，輸出基于所述第三樣本圖對所述第四樣本圖中的至少部分像素點進行坐標變換后的第三輸出圖；

將所述第一輸出圖及所述第三輸出圖輸入所述圖像合成網絡模塊，得到用于知識蒸餾的第二輸出圖。

6.根據權利要求3所述的方法，其特征在于，還包括：

獲取數據集；

基于所述數據集，確定能作為訓練樣本的圖集；

對所述圖集中的圖像進行處理，以提升所述圖集中圖像的分辨率；其中，完成處理的圖像作為訓練樣本中的樣本圖；

對所述圖集中完成處理的圖像進行分析，以得到圖像對應的至少一個特征圖。

7.一種圖像處理方法，其特征在于，包括：

響應于用戶的圖像輸入操作，獲取第一展示物圖像及模特圖像；

確定第一圖像合成模型，其中，所述第一圖像合成模型通過訓練過程學習第二圖像合成模型的圖像合成結果，所述第二圖像合成模型為預先訓練好的模型；

將所述第一展示物圖像及所述模特圖像輸入所述第一圖像合成模型，輸出模特展示第一展示物的合成圖像；

顯示所述合成圖像。