[發明專利]分形圖形風格融合方法、裝置、電子設備及存儲介質

在審

• 申請號: 202010790765.5
• 申請日: 2020-08-07
• 公開（公告）號: CN111985544A
• 公開（公告）日: 2020-11-24
• 發明（設計）人: 劉兆輝;朱群;陳凱;陳志浩
• 申請（專利權）人: 中移（杭州）信息技術有限公司;中國移動通信集團有限公司
• 主分類號: G06K9/62
• 分類號: G06K9/62
• 代理公司: 上海晨皓知識產權代理事務所(普通合伙) 31260
• 代理人: 成麗杰

本發明實施例涉及圖像處理領域，公開了一種分形圖形風格融合方法。本發明利用預先訓練完成的風格生成網絡的空洞卷積操作，提取分形圖片的第一圖片特征及風格圖片的第二圖片特征，融合所述第一圖片特征及所述第二圖片特征得到融合圖片。本發明還提出一種分形圖形風格融合裝置、電子設備以及計算機可讀存儲介質。本發明實施例利用空洞卷積操作，有效地解決了分行圖片融合過程中計算復雜的問題。

技術領域

本發明實施例涉及圖像處理領域，特別涉及一種分形圖形風格融合的方法、裝置、電子設備及存儲介質。

背景技術

分形圖形主要以數學方法模擬自然界存在的、及科學研究中出現的看似無規律現象的圖形，廣義上的分形圖形包括簡單的幾何圖乃至用色復雜的油畫圖等。目前將分形圖形融合至其他圖片的方法有多種，如基于迭代計算與放射變換的融合方法、借助圖形繪制工具的融合方法以及調整迭代模型參數的融合方法等。

但發明人發現，迭代計算與放射變換法以及借助圖形繪制工具在融合過程中計算復雜繁瑣，產生占用過多計算資源的問題。

發明內容

本發明實施方式的目的在于提供一種分形圖形風格融合方法、裝置、電子設備及存儲介質，能夠解決分行圖片融合過程中計算復雜的問題。

為解決上述技術問題，本發明的實施方式提供了一種分形圖形風格融合方法，所述方法包括：

利用預先訓練完成的風格生成網絡的空洞卷積操作，提取分形圖片及風格圖片的圖片特征；融合所述圖片特征得到融合圖片。

為了解決上述問題，本發明還提供一種分形圖形風格融合裝置，所述裝置包括：

圖片特征提取模塊，用于利用預先訓練完成的風格生成網絡的空洞卷積操作，提取分形圖片的第一圖片特征及風格圖片的第二圖片特征；圖片融合模塊，用于融合所述第一圖片特征及所述第二圖片特征得到融合圖片。

為了解決上述問題，本發明還提供一種電子設備，所述電子設備包括：

存儲器，存儲至少一個指令；及處理器，執行所述存儲器中存儲的指令以實現上述所述的分形圖形風格融合方法。

為了解決上述問題，本發明還提供一種計算機可讀存儲介質，所述計算機可讀存儲介質中存儲有至少一個指令，所述至少一個指令被電子設備中的處理器執行以實現上述所述的分形圖形風格融合方法。

本發明實施例利用預先訓練完成的風格生成網絡所包括的空洞卷積操作，提取出分形圖片及風格圖片的圖片特征，由于空洞卷積操作主要在卷積核中填充數字0，在擴大卷積過程感受野的情況下，同時利用數字0相乘依然為0的原理，減少在圖片特征提取過程的計算復雜度，解決分行圖片在融合過程中計算復雜的問題。

優選地，所述利用預先訓練完成的風格生成網絡的空洞卷積操作，提取分形圖片及風格圖片的圖片特征之前，該方法還包括：

根據預設的模型層數，構建卷積層、殘差層及反褶積層，其中，所述卷積層采用空洞卷積；按照預設的組建順序，根據所述卷積層、所述殘差層及所述反褶積層生成所述風格生成網絡。

優選地，所述風格生成網絡的模型層數包括：3層所述卷積層、5層所述殘差層及3層所述反褶積層。

優選地，所述按照預設的組建順序，根據所述卷積層、所述殘差層及所述反褶積層生成所述風格生成網絡之后，該方法還包括：

構建包括內容損失函數、風格損失函數及總全差損失函數的目標損失函數；利用預先獲取的圖形訓練集訓練所述風格生成網絡，并根據所述目標損失函數調整所述風格生成網絡的內部參數值，得到所述預先訓練完成的風格生成網絡。

優選地，所述目標損失函數為：