[發(fā)明專利]表情包文字生成方法、裝置及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010767930.5
• 申請(qǐng)日: 2020-08-03
• 公開（公告）號(hào): CN112036247A
• 公開（公告）日: 2020-12-04
• 發(fā)明（設(shè)計(jì)）人: 張嘉益
• 申請(qǐng)（專利權(quán)）人: 北京小米松果電子有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06F16/332;G06F16/58;G06N3/08;G06T11/60
• 代理公司: 北京英創(chuàng)嘉友知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11447
• 代理人: 曹寒梅

本公開涉及一種表情包文字生成方法、裝置及存儲(chǔ)介質(zhì)，屬于計(jì)算機(jī)技術(shù)領(lǐng)域，能夠降低生成表情包文字的延遲，使得生成結(jié)果可控。一種表情包文字生成方法，包括：獲取待配表情包文字的圖片；對(duì)所述待配表情包文字的圖片中的表情進(jìn)行識(shí)別；基于表情?表情包文字映射數(shù)據(jù)，從表情包文字?jǐn)?shù)據(jù)庫中檢索與識(shí)別出的表情相匹配的表情包文字。

技術(shù)領(lǐng)域

本公開涉及計(jì)算機(jī)技術(shù)領(lǐng)域，尤其涉及表情包文字生成方法、裝置及存儲(chǔ)介質(zhì)。

背景技術(shù)

人物、寵物等照片的表情包化，指的是給人物、寵物等照片配上相應(yīng)的表情包文字。相關(guān)技術(shù)中，通常采用如下方法來實(shí)現(xiàn)表情包化：首先，通過圖像物體識(shí)別模型來識(shí)別出給定的人物、寵物等照片中的物體的關(guān)鍵詞；然后，將關(guān)鍵詞和圖片向量同時(shí)輸入給解碼器，由解碼器生成表情包文字。該方法的缺點(diǎn)在于，生成表情包文字的延遲高，生成結(jié)果不可控。

發(fā)明內(nèi)容

為克服相關(guān)技術(shù)中存在的問題，本公開提供一種表情包文字生成方法、裝置及存儲(chǔ)介質(zhì)。

根據(jù)本公開實(shí)施例的第一方面，提供一種表情包文字生成方法，包括：獲取待配表情包文字的圖片；對(duì)所述待配表情包文字的圖片中的表情進(jìn)行識(shí)別；基于表情-表情包文字映射數(shù)據(jù)，從表情包文字?jǐn)?shù)據(jù)庫中檢索與識(shí)別出的表情相匹配的表情包文字。

可選地，所述對(duì)所述待配表情包文字的圖片中的表情進(jìn)行識(shí)別，包括：利用針對(duì)表情識(shí)別的、預(yù)先訓(xùn)練好的神經(jīng)網(wǎng)絡(luò)，對(duì)所述待配表情包文字的圖片中的表情進(jìn)行識(shí)別。

可選地，所述針對(duì)表情識(shí)別的、預(yù)先訓(xùn)練好的神經(jīng)網(wǎng)絡(luò)通過如下方式進(jìn)行預(yù)先訓(xùn)練：對(duì)帶有表情的真實(shí)已有照片中的表情進(jìn)行標(biāo)記；基于所述真實(shí)已有照片和所述標(biāo)記，構(gòu)建照片-表情映射數(shù)據(jù)；將構(gòu)建好的照片-表情映射數(shù)據(jù)劃分為訓(xùn)練集數(shù)據(jù)和評(píng)測集數(shù)據(jù)；利用所述訓(xùn)練集數(shù)據(jù)對(duì)神經(jīng)網(wǎng)絡(luò)進(jìn)行表情識(shí)別訓(xùn)練、并利用所述評(píng)測集數(shù)據(jù)來評(píng)測所訓(xùn)練的神經(jīng)網(wǎng)絡(luò)的表情識(shí)別準(zhǔn)確率，直至所訓(xùn)練的神經(jīng)網(wǎng)絡(luò)的表情識(shí)別準(zhǔn)確率達(dá)到預(yù)設(shè)準(zhǔn)確率。

可選地，所述表情-表情包文字映射數(shù)據(jù)為表情，表情包文字對(duì)的形式。

可選地，所述表情包文字?jǐn)?shù)據(jù)庫通過如下方式進(jìn)行構(gòu)建：對(duì)含有表情包文字的已有表情包中的表情進(jìn)行標(biāo)記；利用所述已有表情包中的表情包文字和標(biāo)記的表情，構(gòu)建表情-表情包文字映射數(shù)據(jù)；對(duì)所構(gòu)建的所有所述表情-表情包文字映射數(shù)據(jù)進(jìn)行匯總，構(gòu)建所述表情包文字?jǐn)?shù)據(jù)庫。

可選地，所述方法還包括：在從所述表情包文字?jǐn)?shù)據(jù)庫中檢索出與識(shí)別出的表情相匹配的表情包文字之后，向用戶提供檢索出的表情包文字中的至少一個(gè)表情包文字。

可選地，所述方法還包括：在向所述用戶提供檢索出的表情包文字中的至少一個(gè)表情包文字之后，接收用戶關(guān)于換一批表情包文字的輸入指令；基于所述輸入指令，再次向所述用戶提供檢索出的表情包文字中、與先前提供的表情包文字不同的至少一個(gè)表情包文字。

根據(jù)本公開實(shí)施例的第二方面，提供一種表情包文字生成裝置，包括：獲取模塊，用于獲取待配表情包文字的圖片；識(shí)別模塊，用于對(duì)所述待配表情包文字的圖片中的表情進(jìn)行識(shí)別；檢索模塊，用于基于表情-表情包文字映射數(shù)據(jù)，從表情包文字?jǐn)?shù)據(jù)庫中檢索與識(shí)別出的表情相匹配的表情包文字；所述表情包文字?jǐn)?shù)據(jù)庫，用于存儲(chǔ)所述表情-表情包文字映射數(shù)據(jù)。

可選地，所述識(shí)別模塊還用于：利用針對(duì)表情識(shí)別的、預(yù)先訓(xùn)練好的神經(jīng)網(wǎng)絡(luò)，對(duì)圖片中的表情進(jìn)行識(shí)別。

可選地，針對(duì)表情識(shí)別的、預(yù)先訓(xùn)練好的神經(jīng)網(wǎng)絡(luò)通過如下方式進(jìn)行預(yù)先訓(xùn)練：對(duì)帶有表情的真實(shí)已有照片中的表情進(jìn)行標(biāo)記；基于真實(shí)已有照片和標(biāo)記，構(gòu)建照片-表情映射數(shù)據(jù)；將構(gòu)建好的照片-表情映射數(shù)據(jù)劃分為訓(xùn)練集數(shù)據(jù)和評(píng)測集數(shù)據(jù)；利用訓(xùn)練集數(shù)據(jù)對(duì)神經(jīng)網(wǎng)絡(luò)進(jìn)行表情識(shí)別訓(xùn)練、并利用評(píng)測集數(shù)據(jù)來評(píng)測所訓(xùn)練的神經(jīng)網(wǎng)絡(luò)的表情識(shí)別準(zhǔn)確率，直至所訓(xùn)練的神經(jīng)網(wǎng)絡(luò)的表情識(shí)別準(zhǔn)確率達(dá)到預(yù)設(shè)準(zhǔn)確率。

可選地，所述表情-表情包文字映射數(shù)據(jù)為表情，表情包文字對(duì)的形式。