[發(fā)明專利]一種應(yīng)用程序中數(shù)據(jù)的處理方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 201910778784.3
• 申請(qǐng)日: 2019-08-22
• 公開（公告）號(hào): CN110647987A
• 公開（公告）日: 2020-01-03
• 發(fā)明（設(shè)計(jì)）人: 李正興
• 申請(qǐng)（專利權(quán)）人: 騰訊科技(深圳)有限公司
• 主分類號(hào): G06N3/08
• 分類號(hào): G06N3/08;G06F16/33;G06F16/36;G06K9/62;G06N3/04
• 代理公司: 44202 廣州三環(huán)專利商標(biāo)代理有限公司
• 代理人: 郝傳鑫;賈允

本申請(qǐng)公開了一種應(yīng)用程序中數(shù)據(jù)的處理方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)，該方法包括：基于實(shí)體識(shí)別模型和意圖識(shí)別模型對(duì)待識(shí)別數(shù)據(jù)進(jìn)行實(shí)體和意圖的識(shí)別，得到預(yù)選實(shí)體和預(yù)選意圖，若預(yù)選實(shí)體與預(yù)選意圖對(duì)應(yīng)的意圖模板中子模板中的實(shí)體不存在匹配關(guān)系，對(duì)待識(shí)別數(shù)據(jù)進(jìn)行分詞操作，得到待糾錯(cuò)數(shù)據(jù)，根據(jù)應(yīng)用程序的實(shí)體庫和預(yù)設(shè)編輯距離確定待糾錯(cuò)數(shù)據(jù)對(duì)應(yīng)的實(shí)體集合；實(shí)體集合中的每個(gè)實(shí)體為實(shí)體庫中的實(shí)體，基于待糾錯(cuò)數(shù)據(jù)對(duì)應(yīng)的實(shí)體集合中每個(gè)實(shí)體和待糾錯(cuò)數(shù)據(jù)之間的相似程度值從實(shí)體集合中確定出用于糾錯(cuò)的目標(biāo)實(shí)體，基于目標(biāo)實(shí)體對(duì)待識(shí)別數(shù)據(jù)進(jìn)行糾錯(cuò)處理。如此，通過對(duì)待識(shí)別數(shù)據(jù)預(yù)先進(jìn)行數(shù)據(jù)糾錯(cuò)處理，可以提高后續(xù)數(shù)據(jù)識(shí)別處理的準(zhǔn)確率。

技術(shù)領(lǐng)域

本申請(qǐng)涉及互聯(lián)網(wǎng)技術(shù)領(lǐng)域，尤其涉及一種應(yīng)用程序中數(shù)據(jù)的處理方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)。

背景技術(shù)

當(dāng)今，各個(gè)領(lǐng)域的數(shù)據(jù)正處于飛速增長(zhǎng)中，由此導(dǎo)致數(shù)據(jù)處理技術(shù)領(lǐng)域的發(fā)展越來越迅速。一般的，數(shù)據(jù)處理的過程為：設(shè)備根據(jù)接收到的待識(shí)別數(shù)據(jù)，對(duì)該待識(shí)別數(shù)據(jù)中的實(shí)體進(jìn)行識(shí)別，并對(duì)識(shí)別結(jié)果進(jìn)行處理，以確定該數(shù)據(jù)對(duì)應(yīng)的輸出。這種數(shù)據(jù)處理的方式可以被應(yīng)用在語言識(shí)別，人機(jī)交互等各種領(lǐng)域。

上述描述中，實(shí)體是指具有具體而真實(shí)的形態(tài)或者結(jié)構(gòu)的事物，能夠?yàn)槿藗兯兄c親手接觸。從數(shù)據(jù)處理的角度看，現(xiàn)實(shí)世界中的客觀事物稱為實(shí)體，它是現(xiàn)實(shí)世界中任何可區(qū)分，可識(shí)別的事物。然而，由于設(shè)備接收的待識(shí)別數(shù)據(jù)本身可能存在某些錯(cuò)誤，比如，用戶在輸入過程中輸錯(cuò)某些實(shí)體中的字或者詞。如果設(shè)備直接對(duì)有錯(cuò)誤的待識(shí)別數(shù)據(jù)進(jìn)行識(shí)別，則可能對(duì)最終結(jié)果產(chǎn)生較大的負(fù)面影響，基于此，設(shè)備需要在對(duì)待識(shí)別數(shù)據(jù)進(jìn)行識(shí)別處理之前，進(jìn)行數(shù)據(jù)糾錯(cuò)處理。

本申請(qǐng)實(shí)施例提供一種應(yīng)用程序中數(shù)據(jù)的處理方法，通過對(duì)待識(shí)別數(shù)據(jù)預(yù)先進(jìn)行數(shù)據(jù)糾錯(cuò)處理，可以提高后續(xù)數(shù)據(jù)識(shí)別處理的識(shí)別準(zhǔn)確率。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例提供了一種應(yīng)用程序中數(shù)據(jù)的處理方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)，通過對(duì)待識(shí)別數(shù)據(jù)預(yù)先進(jìn)行數(shù)據(jù)糾錯(cuò)處理，可以提高后續(xù)數(shù)據(jù)識(shí)別處理的識(shí)別準(zhǔn)確率。

一方面，本申請(qǐng)實(shí)施例提供了一種應(yīng)用程序中數(shù)據(jù)的處理方法，該方法包括：

基于實(shí)體識(shí)別模型和意圖識(shí)別模型對(duì)待識(shí)別數(shù)據(jù)進(jìn)行實(shí)體和意圖的識(shí)別，得到預(yù)選實(shí)體和預(yù)選意圖；

若預(yù)選實(shí)體與預(yù)選意圖對(duì)應(yīng)的意圖模板中子模板中的實(shí)體不存在匹配關(guān)系，對(duì)待識(shí)別數(shù)據(jù)進(jìn)行分詞操作，得到待糾錯(cuò)數(shù)據(jù)；

根據(jù)應(yīng)用程序的實(shí)體庫和預(yù)設(shè)編輯距離確定待糾錯(cuò)數(shù)據(jù)對(duì)應(yīng)的實(shí)體集合；實(shí)體集合中的每個(gè)實(shí)體為實(shí)體庫中的實(shí)體；

基于待糾錯(cuò)數(shù)據(jù)對(duì)應(yīng)的實(shí)體集合中每個(gè)實(shí)體和待糾錯(cuò)數(shù)據(jù)之間的相似程度值從實(shí)體集合中確定出用于糾錯(cuò)的目標(biāo)實(shí)體；

基于目標(biāo)實(shí)體對(duì)待識(shí)別數(shù)據(jù)進(jìn)行糾錯(cuò)處理。

另一方面提供了一種應(yīng)用程序中數(shù)據(jù)的處理裝置，該裝置包括：

識(shí)別模塊，用于基于實(shí)體識(shí)別模型和意圖識(shí)別模型對(duì)待識(shí)別數(shù)據(jù)進(jìn)行實(shí)體和意圖的識(shí)別，得到預(yù)選實(shí)體和預(yù)選意圖；

分詞模塊，用于若預(yù)選實(shí)體與預(yù)選意圖對(duì)應(yīng)的意圖模板中子模板中的實(shí)體不存在匹配關(guān)系，對(duì)待識(shí)別數(shù)據(jù)進(jìn)行分詞操作，得到待糾錯(cuò)數(shù)據(jù)；

第一確定模塊，用于根據(jù)應(yīng)用程序的實(shí)體庫和預(yù)設(shè)編輯距離確定待糾錯(cuò)數(shù)據(jù)對(duì)應(yīng)的實(shí)體集合；實(shí)體集合中的每個(gè)實(shí)體為實(shí)體庫中的實(shí)體；

第二確定模塊，用于基于待糾錯(cuò)數(shù)據(jù)對(duì)應(yīng)的實(shí)體集合中每個(gè)實(shí)體和待糾錯(cuò)數(shù)據(jù)之間的相似程度值從實(shí)體集合中確定出用于糾錯(cuò)的目標(biāo)實(shí)體；

處理模塊，用于基于目標(biāo)實(shí)體對(duì)待識(shí)別數(shù)據(jù)進(jìn)行糾錯(cuò)處理。