[發(fā)明專利]基于生成對抗網(wǎng)絡(luò)的字體數(shù)據(jù)處理方法及裝置

有效

• 申請?zhí)枺?/td>: 202110288312.7
• 申請日: 2021-03-17
• 公開（公告）號(hào): CN112861806B
• 公開（公告）日: 2023-08-22
• 發(fā)明（設(shè)計(jì)）人: 溫琦;袁燚;范長杰;胡志鵬
• 申請（專利權(quán)）人: 網(wǎng)易(杭州)網(wǎng)絡(luò)有限公司
• 主分類號(hào): G06V30/32
• 分類號(hào): G06V30/32;G06V30/19;G06N20/00
• 代理公司: 北京超凡宏宇專利代理事務(wù)所(特殊普通合伙) 11463
• 代理人: 鐘揚(yáng)飛

本發(fā)明提供了一種基于生成對抗網(wǎng)絡(luò)的字體數(shù)據(jù)處理方法及裝置。通過確定第一數(shù)量個(gè)目標(biāo)字符圖像，所述目標(biāo)字符圖像中字符的風(fēng)格為目標(biāo)字體；基于第一數(shù)量個(gè)目標(biāo)字符圖像以及預(yù)先確定的源字體庫，確定第二數(shù)量個(gè)源字符圖像，所述第二數(shù)量大于所述第一數(shù)量，所述第二數(shù)量個(gè)源字符圖像中的部分與所述目標(biāo)字符圖像對應(yīng)相同的字符；基于所述第一數(shù)量個(gè)目標(biāo)字符圖像以及所述第二數(shù)量個(gè)源字符圖像對所述生成對抗網(wǎng)絡(luò)進(jìn)行訓(xùn)練，得到訓(xùn)練好的生成器，所述訓(xùn)練好的生成器用于生成所述目標(biāo)字體的字符圖像。以此可以實(shí)現(xiàn)使用少量的目標(biāo)字符圖像既可以使得模型具備生成目標(biāo)字體的能力，提升了模型的應(yīng)用場景，提高了用戶體驗(yàn)。

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)技術(shù)領(lǐng)域，尤其是涉及一種基于生成對抗網(wǎng)絡(luò)的字體數(shù)據(jù)處理方法及裝置。

背景技術(shù)

漢字是古老而珍貴的文化遺產(chǎn)。自古以來，無數(shù)優(yōu)秀的書法家留下了寶貴的書法作品，成為人類文明的輝煌成就。但是，在悠久的歷史中，許多珍貴的書法作品丟失了。不同于英語只有26個(gè)字母，漢語覆蓋了成千上萬個(gè)字，每個(gè)字都有不同的字形并代表不同的含義，此外，不同的書法家都有自己的書寫風(fēng)格，具有特有的整體結(jié)構(gòu)和筆觸細(xì)節(jié)。

對漢字生成的研究已經(jīng)有很長時(shí)間，基于圖像的方法拆分并重組數(shù)據(jù)集中的相應(yīng)筆畫和部首來生成所需的漢字，但是，目前的方式都需要較為龐大的訓(xùn)練樣本。

發(fā)明內(nèi)容

本發(fā)明的目的在于提供一種基于生成對抗網(wǎng)絡(luò)的字體數(shù)據(jù)處理方法及裝置，以緩解了現(xiàn)有技術(shù)中存在的訓(xùn)練樣本數(shù)據(jù)量需求大的技術(shù)問題。

第一方面，本發(fā)明提供一種基于生成對抗網(wǎng)絡(luò)的字體數(shù)據(jù)處理方法，包括：

確定第一數(shù)量個(gè)目標(biāo)字符圖像，所述目標(biāo)字符圖像中字符的風(fēng)格為目標(biāo)字體；

基于第一數(shù)量個(gè)目標(biāo)字符圖像以及預(yù)先確定的源字體庫，確定第二數(shù)量個(gè)源字符圖像，所述第二數(shù)量大于所述第一數(shù)量，所述第二數(shù)量個(gè)源字符圖像中的部分與所述目標(biāo)字符圖像對應(yīng)相同的字符；

基于所述第一數(shù)量個(gè)目標(biāo)字符圖像以及所述第二數(shù)量個(gè)源字符圖像對所述生成對抗網(wǎng)絡(luò)進(jìn)行訓(xùn)練，得到訓(xùn)練好的生成器，所述訓(xùn)練好的生成器用于生成所述目標(biāo)字體的字符圖像。

在可選的實(shí)施方式中，所述基于第一數(shù)量個(gè)目標(biāo)字符圖像以及預(yù)先確定的源字體庫，確定第二數(shù)量個(gè)源字符圖像，包括：

基于第一數(shù)量個(gè)目標(biāo)字符圖像，從預(yù)先確定的源字體庫中渲染得到與所述目標(biāo)字符圖像對應(yīng)相同的字符的第三數(shù)量個(gè)源字符圖像；

從預(yù)先確定的源字體庫中隨機(jī)渲染得到第四數(shù)量個(gè)源字符圖像；所述第二數(shù)量個(gè)源字符圖像由所述第三數(shù)量個(gè)源字符圖像和所述第四數(shù)量個(gè)源字符圖像構(gòu)成。

在可選的實(shí)施方式中，所述第三數(shù)量與所述第四數(shù)量均等于所述第一數(shù)量；

所述第一數(shù)量個(gè)目標(biāo)字符圖像和所述第三數(shù)量個(gè)源字符圖像構(gòu)成第一圖像集，所述第一圖像集包括多個(gè)第一圖像對，每個(gè)所述第一圖像對包括同一字符對應(yīng)的目標(biāo)字符圖像和源字符圖像；

所述第一數(shù)量個(gè)目標(biāo)字符圖像和所述第四數(shù)量個(gè)源字符圖像構(gòu)成第二圖像集，第二圖像集包括多個(gè)第二圖像對，每個(gè)所述第二圖像對包括不同字符對應(yīng)的目標(biāo)字符圖像和源字符圖像。

在可選的實(shí)施方式中，所述基于所述第一數(shù)量個(gè)目標(biāo)字符圖像以及所述第二數(shù)量個(gè)源字符圖像對所述生成對抗網(wǎng)絡(luò)進(jìn)行訓(xùn)練，得到訓(xùn)練好的生成器，包括：

基于所述第一圖像集和所述第二圖像集對所述生成對抗網(wǎng)絡(luò)進(jìn)行訓(xùn)練，得到訓(xùn)練好的生成器。

在可選的實(shí)施方式中，所述基于所述第一圖像集和所述第二圖像集對所述生成對抗網(wǎng)絡(luò)進(jìn)行訓(xùn)練，得到訓(xùn)練好的生成器，包括：

基于所述第一圖像集以及第一損失函數(shù)對所述生成對抗網(wǎng)絡(luò)進(jìn)行第一訓(xùn)練；