[發明專利]一種多風格的游戲內風格轉移系統

在審

• 申請號: 202210047517.0
• 申請日: 2022-01-17
• 公開（公告）號: CN114387159A
• 公開（公告）日: 2022-04-22
• 發明（設計）人: 曹杰;劉金良;王昌輝;尹文堯;孫熙銘;周迅磊;陳志杰
• 申請（專利權）人: 云境商務智能研究院南京有限公司
• 主分類號: G06T3/00
• 分類號: G06T3/00;G06T15/20;G06N3/04;G06N3/08
• 代理公司: 南京天華專利代理有限責任公司 32218
• 代理人: 劉暢;徐冬濤

1.一種多風格的游戲內風格轉移系統，其特征在于，包括以下步驟：

步驟S1、首先搭建系統所使用的神經網絡模型；

步驟S2、從數據庫中取出內容圖像和風格參考圖像作為訓練集；

步驟S3、對風格參考圖像和內容圖像進行圖像預處理；

步驟S4、計算總損失，包括內容損失和風格損失；

步驟S5、根據計算的總損失，計算梯度并更新輸入圖像；

步驟S6、重復執行步驟S3-S5,最終將訓練好的模型體系結構及其參數進行保存；

步驟S7、系統加載模型體系結構及其參數，之后用戶選擇游戲內的風格；

步驟S8、系統將游戲視頻的每一幀的圖像輸入模型；

步驟S9、將所述模型的輸出進行渲染后復制到屏幕上進行顯示；

步驟S10、重復執行步驟S8-S9，實時地提供不同風格的虛擬游戲場景。

2.根據權利要求1所述的一種多風格的游戲內風格轉移系統，其特征在于，所述步驟S1、搭建系統所使用的模型具體步驟如下：

步驟S1.1、選擇系統所需要的深度學習模型；

步驟S1.2、去掉所述深度學習模型的頂層并加載參數；

步驟S1.3、選擇所述深度學習模型的若干卷積層作為內容中間層；

步驟S1.4、選擇所述深度學習模型的若干卷積層作為風格中間層；

步驟S1.5、以所述深度學習模型的輸入作為新模型的輸入，所述內容中間層和風格中間層的輸出作為新模型的輸出構建神經網絡模型。

3.根據權利要求1所述的一種多風格的游戲內風格轉移系統，其特征在于，所述步驟S2中：所述的內容圖像指從視頻和動畫電影中獲得的圖像，所述風格參考圖像指畫家的繪畫圖像。

4.根據權利要求1所述的一種多風格的游戲內風格轉移系統，其特征在于，所述步驟S3、對所述風格參考圖像和內容圖像進行圖像預處理的具體步驟如下：

步驟S3.1、將所述內容圖像投入所述神經網絡模型中，得到內容中間層輸出的內容目標值；

步驟S3.2、將所述風格參考圖像投入所述神經網絡模型中，得到風格中間層輸出的風格目標值；

步驟S3.3、將所述輸入圖像投入所述神經網絡模型中，獲得內容中間層輸出的內容輸出值和風格中間層輸出的風格輸出值。

5.根據權利要求1所述的一種多風格的游戲內風格轉移系統，其特征在于，所述步驟S4、計算總損失的具體步驟如下：

步驟S4.1、根據所述的內容目標值和所述的內容輸出值，計算內容損失；

步驟S4.2、根據所述的風格目標值和所述的風格輸出值，計算風格損失；

步驟S4.3、根據所述的內容損失和風格損失，計算總損失。

6.根據權利要求2所述的一種多風格的游戲內風格轉移系統，其特征在于，所述步驟S1.2、所述深度學習模型的頂層和參數具體如下：

所述深度學習模型的頂層指分類等任務的分類器，所述參數則是分類任務中深度模型已經訓練好的參數。

7.根據權利要求2所述的一種多風格的游戲內風格轉移系統，其特征在于，所述深度學習模型包括VGG16,VGG19。