[發明專利]元素圖像生成方法、裝置及系統

有效

• 申請號: 201810315058.3
• 申請日: 2018-04-10
• 公開（公告）號: CN110363830B
• 公開（公告）日: 2023-05-02
• 發明（設計）人: 孫東慧;張慶;唐浩超
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: G06T11/60
• 分類號: G06T11/60;G06T9/00;G06V10/74;G06V10/762
• 代理公司: 北京同鈞律師事務所 16037
• 代理人: 許懷遠

1.一種元素圖像生成方法，其特征在于，包括：

基于初始元素圖像生成第一特征圖；

基于第一特征圖，生成第二特征圖；

將第二特征圖作為新的第一特征圖，迭代執行所述生成第二特征圖的步驟，以獲得多個第二特征圖；

基于所述第一特征圖和所述多個第二特征圖中至少一個第二特征圖，生成與所述初始元素圖像相對應的目標元素圖像；

其中，所述迭代執行所述生成第二特征圖的步驟包括至少一次如下步驟：

基于第一特征圖和降采樣元素圖像，生成第二特征圖，所述降采樣元素圖像由所述初始元素圖像經過將采樣處理后得到，所述降采樣元素圖像與所述第一特征圖的空間尺寸相匹配。

2.根據權利要求1所述方法，其特征在于，所述方法由元素圖像生成模塊執行；所述元素圖像生成模塊中包括編碼子模塊，所述編碼子模塊中包括逐級相連的M級編碼單元，M為自然數；

所述基于初始元素圖像生成第一特征圖的步驟，由第一級編碼單元執行；

所述生成第二特征圖的步驟，由第二級編碼單元至第M級編碼單元執行。

3.根據權利要求2所述方法，其特征在于，所述基于第一特征圖和降采樣元素圖像，生成第二特征圖的步驟，由第二級編碼單元至第M級編碼單元中至少一級編碼單元執行。

4.根據權利要求2或3所述方法，其特征在于，所述方法還包括：

確定元素圖像對，所述元素圖像對中包括原始圖像和與所述原始圖像相對應的真實樣本圖像；

利用元素圖像生成模塊，基于所述原始圖像生成與所述原始圖像相對應的生成圖像；

利用判別模塊，判別所述生成圖像與所述真實樣本圖像之間的差異程度；其中，所述生成圖像標記為負類，所述真實樣本圖像標記為正類；

根據所述差異程度，交替調整所述元素圖像生成模塊和所述判別模塊中的參數，直至所述差異程度滿足預設條件。

5.根據權利要求4所述方法，其特征在于，判別所述生成圖像與所述真實樣本圖像之間的差異程度，包括：

根據所述生成圖像和所述真實樣本圖像計算損失函數；

根據所述損失函數的計算結果輸出判別結果，所述判別結果用于反映所述生成圖像與所述真實樣本圖像之間的差異程度。

6.根據權利要求5所述方法，其特征在于，所述損失函數包括特征空間損失函數，所述特征空間損失函數用于反映所述生成圖像與所述真實樣本圖像之間在特征空間上的差異。

7.根據權利要求5所述方法，其特征在于，所述損失函數包括對抗損失函數，所述對抗損失函數用于反映所述元素圖像生成模塊對降低所述差異程度的貢獻程度和所述判別模塊對提高所述差異程度的貢獻程度。

8.根據權利要求5所述方法，其特征在于，所述損失函數包括以下至少一項：

像素空間損失函數，所述像素空間損失函數用于反映所述生成圖像與所述真實樣本圖像之間在對應像素點上的差異；

類別損失函數，所述類別損失函數用于反映所述生成圖像與所述真實樣本圖像之間在類別上的差異。

9.根據權利要求4所述方法，其特征在于，在利用元素圖像生成模塊，基于所述原始圖像生成與所述原始圖像相對應的生成圖像之后，所述方法還包括：

對生成的生成圖像進行測試，確定所述生成圖像與所述真實樣本圖像的匹配程度。

10.根據權利要求9所述方法，其特征在于，對所述元素圖像生成模型生成的生成圖像進行測試，確定所述生成圖像與所述真實樣本圖像的匹配程度，包括：

根據以下至少一項指標確定所述生成圖像與所述真實樣本圖像的匹配程度：

所述生成圖像與所述真實樣本圖像之間的L1距離；

所述生成圖像與所述真實樣本圖像之間的峰值信噪比PSNR；

所述生成圖像與所述真實樣本圖像之間的結構相似度SSIM。