[發(fā)明專(zhuān)利]信息識(shí)別方法、裝置、計(jì)算機(jī)系統(tǒng)及可讀存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110186799.8
• 申請(qǐng)日: 2021-02-10
• 公開(kāi)（公告）號(hào): CN113779240A
• 公開(kāi)（公告）日: 2021-12-10
• 發(fā)明（設(shè)計(jì)）人: 周彬
• 申請(qǐng)（專(zhuān)利權(quán)）人: 北京沃東天駿信息技術(shù)有限公司;北京京東世紀(jì)貿(mào)易有限公司
• 主分類(lèi)號(hào): G06F16/35
• 分類(lèi)號(hào): G06F16/35;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 中科專(zhuān)利商標(biāo)代理有限責(zé)任公司 11021
• 代理人: 孫蕾

本公開(kāi)提供了一種文本信息識(shí)別模型的訓(xùn)練方法，包括：獲取訓(xùn)練樣本數(shù)據(jù)集，其中訓(xùn)練樣本數(shù)據(jù)集中的訓(xùn)練樣本包括文本信息及每個(gè)文本信息對(duì)應(yīng)的初始類(lèi)別標(biāo)簽，其中，文本信息至少包括目標(biāo)關(guān)鍵詞，初始類(lèi)別標(biāo)簽用于表征文本信息為違規(guī)信息或者合規(guī)信息；構(gòu)建初始文本信息識(shí)別模型，其中，初始文本信息識(shí)別模型中包括空洞卷積網(wǎng)絡(luò)模塊和雙向長(zhǎng)短期記憶網(wǎng)絡(luò)模塊，以及基于訓(xùn)練樣本數(shù)據(jù)集對(duì)初始文本信息識(shí)別模型進(jìn)行訓(xùn)練，得到文本信息識(shí)別模型。本公開(kāi)還提供了文本信息識(shí)別方法、裝置、計(jì)算機(jī)系統(tǒng)、可讀存儲(chǔ)介質(zhì)以及計(jì)算機(jī)程序產(chǎn)品。

技術(shù)領(lǐng)域

本公開(kāi)涉及計(jì)算機(jī)技術(shù)領(lǐng)域和互聯(lián)網(wǎng)技術(shù)領(lǐng)域，更具體地，涉及一種文本信息識(shí)別模型的訓(xùn)練方法、文本信息識(shí)別方法、裝置、計(jì)算機(jī)系統(tǒng)、可讀存儲(chǔ)介質(zhì)及計(jì)算機(jī)程序產(chǎn)品。

背景技術(shù)

隨著生活水平的提高，以及計(jì)算機(jī)、互聯(lián)網(wǎng)技術(shù)的不斷發(fā)展，網(wǎng)絡(luò)購(gòu)物越來(lái)越普及。網(wǎng)絡(luò)購(gòu)物為現(xiàn)今的傳統(tǒng)企業(yè)提供了一個(gè)很好的機(jī)會(huì)與平臺(tái)，構(gòu)建合理的網(wǎng)絡(luò)購(gòu)物平臺(tái)不失為傳統(tǒng)企業(yè)未來(lái)發(fā)展重心和出路。但是，隨著入駐商鋪越來(lái)越多，網(wǎng)絡(luò)購(gòu)物平臺(tái)上各個(gè)店鋪展示的網(wǎng)頁(yè)信息中，可能存在一些違規(guī)信息。這樣的違規(guī)信息展示，容易使消費(fèi)者上當(dāng)受騙，且后續(xù)無(wú)法追溯自己的合法利益。因此，為凈化網(wǎng)絡(luò)購(gòu)物平臺(tái)環(huán)境，需要對(duì)平臺(tái)上展示的商品信息進(jìn)行篩選與審核。

在實(shí)現(xiàn)本公開(kāi)構(gòu)思的過(guò)程中，發(fā)明人發(fā)現(xiàn)相關(guān)技術(shù)中至少存在如下問(wèn)題：現(xiàn)有篩查方式需要大量的人力投入，工作效率低，審核準(zhǔn)確度低，容易出現(xiàn)漏篩情況。

發(fā)明內(nèi)容

有鑒于此，本公開(kāi)提供了一種文本信息識(shí)別模型的訓(xùn)練方法、文本信息識(shí)別方法、裝置、計(jì)算機(jī)系統(tǒng)、可讀存儲(chǔ)介質(zhì)及計(jì)算機(jī)程序產(chǎn)品。

本公開(kāi)的一個(gè)方面提供了一種文本信息識(shí)別模型的訓(xùn)練方法，包括：

獲取訓(xùn)練樣本數(shù)據(jù)集，其中，上述訓(xùn)練樣本數(shù)據(jù)集中的訓(xùn)練樣本包括文本信息及每個(gè)文本信息對(duì)應(yīng)的初始類(lèi)別標(biāo)簽，其中，上述文本信息至少包括目標(biāo)關(guān)鍵詞，上述初始類(lèi)別標(biāo)簽用于表征上述文本信息為違規(guī)信息或者合規(guī)信息；

構(gòu)建初始文本信息識(shí)別模型，其中，上述初始文本信息識(shí)別模型包括空洞卷積網(wǎng)絡(luò)模塊和雙向長(zhǎng)短期記憶網(wǎng)絡(luò)模塊；以及

基于上述訓(xùn)練樣本數(shù)據(jù)集對(duì)上述初始文本信息識(shí)別模型進(jìn)行訓(xùn)練，得到文本信息識(shí)別模型。

根據(jù)本公開(kāi)的實(shí)施例，其中，上述基于上述訓(xùn)練樣本數(shù)據(jù)集對(duì)上述初始文本信息識(shí)別模型進(jìn)行訓(xùn)練，得到文本信息識(shí)別模型包括：

基于上述訓(xùn)練樣本數(shù)據(jù)集中的訓(xùn)練樣本，構(gòu)建上述初始文本信息識(shí)別模型的損失函數(shù)；其中，上述損失函數(shù)包括均方錯(cuò)誤誤差函數(shù)；

將上述訓(xùn)練樣本輸入至上述初始文本信息識(shí)別模型中，得到預(yù)測(cè)類(lèi)別標(biāo)簽；

將上述預(yù)測(cè)類(lèi)別標(biāo)簽與上述初始類(lèi)別標(biāo)簽輸入上述損失函數(shù)，得到損失結(jié)果；

根據(jù)上述損失結(jié)果調(diào)整上述初始文本信息識(shí)別模型中的參數(shù)，直到上述損失函數(shù)收斂；以及

將上述損失函數(shù)收斂時(shí)對(duì)應(yīng)的模型作為上述文本信息識(shí)別模型。

根據(jù)本公開(kāi)的實(shí)施例，其中，上述初始文本信息識(shí)別模型還包括特征向量表征網(wǎng)絡(luò)、注意力機(jī)制層、輸出層；

上述將上述訓(xùn)練樣本輸入至上述初始文本信息識(shí)別模型中，得到預(yù)測(cè)類(lèi)別標(biāo)簽包括：

利用上述特征向量表征網(wǎng)絡(luò)處理上述訓(xùn)練樣本的文本信息，得到第一中間特征；

利用上述空洞卷積網(wǎng)絡(luò)模塊處理上述第一中間特征，得到第二中間特征；

利用上述雙向長(zhǎng)短期記憶網(wǎng)絡(luò)模塊處理上述第一中間特征，得到第三中間特征；

利用上述注意力機(jī)制層處理上述第二中間特征和上述第三中間特征，得到第四中間特征；以及