[發(fā)明專利]文本增強(qiáng)方法、文本增強(qiáng)模型的訓(xùn)練方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 202210452492.2
• 申請(qǐng)日: 2022-04-27
• 公開（公告）號(hào): CN114817469B
• 公開（公告）日: 2023-08-08
• 發(fā)明（設(shè)計(jì)）人: 白安琪;王洪斌;權(quán)佳成
• 申請(qǐng)（專利權(quán)）人: 馬上消費(fèi)金融股份有限公司
• 主分類號(hào): G06F16/33
• 分類號(hào): G06F16/33;G06F40/279;G06F40/289;G06F18/214
• 代理公司: 北京國昊天誠知識(shí)產(chǎn)權(quán)代理有限公司 11315
• 代理人: 朱文杰

本申請(qǐng)實(shí)施例提供了一種文本增強(qiáng)方法、文本增強(qiáng)模型的訓(xùn)練方法及裝置。其中，文本增強(qiáng)方法包括：獲取待處理文本和待處理文本的目標(biāo)增強(qiáng)類型；將待處理文本和目標(biāo)增強(qiáng)類型輸入文本增強(qiáng)模型中進(jìn)行文本增強(qiáng)處理，得到增強(qiáng)文本；其中，增強(qiáng)文本符合目標(biāo)增強(qiáng)類型對(duì)應(yīng)的社會(huì)方言的語言特征；文本增強(qiáng)處理包括根據(jù)待處理文本的文本特征，確定與待處理文本相匹配的至少一種目標(biāo)增強(qiáng)方式；以及根據(jù)目標(biāo)增強(qiáng)類型和至少一種目標(biāo)增強(qiáng)方式，對(duì)待處理文本進(jìn)行文本增強(qiáng)處理。通過本申請(qǐng)實(shí)施例，提升了文本增強(qiáng)效果，實(shí)現(xiàn)了對(duì)特定類型的社會(huì)方言進(jìn)行有針對(duì)性的文本增強(qiáng)。

技術(shù)領(lǐng)域

本申請(qǐng)涉及自然語言處理技術(shù)領(lǐng)域，尤其涉及一種文本增強(qiáng)方法、文本增強(qiáng)模型的訓(xùn)練方法及裝置。

背景技術(shù)

文本增強(qiáng)是自然語言處理技術(shù)的典型之一，當(dāng)前的文本增強(qiáng)方式，通常是基于文本的表層，隨機(jī)的進(jìn)行字詞等的插入、刪除或替換，形成的增強(qiáng)文本往往會(huì)存在不符合語法的問題。并且，由于用戶的職業(yè)、社會(huì)地位、受教育程度等的不同，往往語言表述上也存在差異，由該差異形成的語言分層，可稱為社會(huì)方言。社會(huì)方言可以包括企業(yè)家方言、作家方言、教師方言、學(xué)生方言等。當(dāng)采用現(xiàn)有的文本增強(qiáng)方式對(duì)某種類型的社會(huì)方言進(jìn)行文本增強(qiáng)時(shí)，很顯然的，容易出現(xiàn)不符合該種類型的語言表述方式的問題，即存在文本增強(qiáng)效果低的問題。因此，如何有針對(duì)性的對(duì)特定類型的社會(huì)方言進(jìn)行增強(qiáng)，是當(dāng)前自然語言處理領(lǐng)域中需要解決的技術(shù)問題。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例的目的是提供一種文本增強(qiáng)方法、文本增強(qiáng)模型的訓(xùn)練方法及裝置，以實(shí)現(xiàn)對(duì)特定類型的社會(huì)方言進(jìn)行有針對(duì)性的文本增強(qiáng)，提升文本增強(qiáng)效果。

為了實(shí)現(xiàn)上述技術(shù)方案，本申請(qǐng)實(shí)施例是這樣實(shí)現(xiàn)的：

第一方面，本申請(qǐng)實(shí)施例提供了一種文本增強(qiáng)方法，包括：

獲取待處理文本和所述待處理文本的目標(biāo)增強(qiáng)類型；

將所述待處理文本和所述目標(biāo)增強(qiáng)類型輸入文本增強(qiáng)模型中進(jìn)行文本增強(qiáng)處理，得到增強(qiáng)文本；所述增強(qiáng)文本符合所述目標(biāo)增強(qiáng)類型對(duì)應(yīng)的社會(huì)方言的語言特征；

其中，所述文本增強(qiáng)處理包括：根據(jù)所述待處理文本的文本特征，確定與所述待處理文本相匹配的至少一種目標(biāo)增強(qiáng)方式；根據(jù)所述目標(biāo)增強(qiáng)類型和所述至少一種目標(biāo)增強(qiáng)方式，對(duì)所述待處理文本進(jìn)行文本增強(qiáng)處理。

可以看出，本申請(qǐng)實(shí)施例中，通過獲取待處理文本和待處理文的目標(biāo)增強(qiáng)類型，并基于文本增強(qiáng)模型根據(jù)待處理文本的文本特征，確定與待處理文本相匹配的至少一種目標(biāo)增強(qiáng)方式，以及根據(jù)目標(biāo)增強(qiáng)類型和目標(biāo)增強(qiáng)方式對(duì)待處理文本進(jìn)行文本增強(qiáng)處理，得到增強(qiáng)文本，該增強(qiáng)文本符合目標(biāo)增強(qiáng)類型對(duì)應(yīng)的社會(huì)方言的語言特征。由于是根據(jù)待處理文本的文本特征確定目標(biāo)增強(qiáng)方式，深入到文本內(nèi)部而不是局限于文本表層，因此所確定的目標(biāo)增強(qiáng)方式能夠更適合待處理文本，有利于提升文本增強(qiáng)效果。再者，根據(jù)目標(biāo)增強(qiáng)類型和確定的目標(biāo)增強(qiáng)方式，對(duì)待處理文本進(jìn)行文本增強(qiáng)處理，避免了無目的的隨機(jī)替換或插入，保障了得到的增強(qiáng)文本符合目標(biāo)增強(qiáng)類型對(duì)應(yīng)的社會(huì)方言的語言特征，不僅實(shí)現(xiàn)了對(duì)特定類型的社會(huì)方言的有針對(duì)性的文本增強(qiáng)，而且能夠提升特定類型的社會(huì)方言的增強(qiáng)效率，還能夠?qū)崿F(xiàn)特定類型的社會(huì)方言語料庫的有效擴(kuò)充。

第二方面，本申請(qǐng)實(shí)施例提供了一種文本增強(qiáng)模型的訓(xùn)練方法，包括：

獲取待訓(xùn)練的樣本集；所述樣本集中的每個(gè)樣本標(biāo)注有標(biāo)簽，所述標(biāo)簽包括所述樣本所屬的社會(huì)方言的類型信息和所述樣本的句型信息；

將所述樣本集輸入待訓(xùn)練模型中進(jìn)行迭代訓(xùn)練處理，得到文本增強(qiáng)模型；其中，所述文本增強(qiáng)模型用于根據(jù)待處理文本的文本特征，確定與所述待處理文本相匹配的至少一種目標(biāo)增強(qiáng)方式；并根據(jù)所述待處理文本的目標(biāo)增強(qiáng)類型和所述目標(biāo)增強(qiáng)方式對(duì)所述待處理文本進(jìn)行文本增強(qiáng)處理，得到增強(qiáng)文本；所述增強(qiáng)文本符合所述目標(biāo)增強(qiáng)類型對(duì)應(yīng)的社會(huì)方言的語言特征。