[發(fā)明專利]語義完整性確定方法、裝置、電子設(shè)備和存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202010634056.8
• 申請日: 2020-07-02
• 公開（公告）號: CN111831806A
• 公開（公告）日: 2020-10-27
• 發(fā)明（設(shè)計(jì)）人: 魯驍;鄧雄文;柯震;紀(jì)鴻旭;過群;孟二利;王斌
• 申請（專利權(quán)）人: 北京小米松果電子有限公司
• 主分類號: G06F16/332
• 分類號: G06F16/332;G06F40/30
• 代理公司: 北京英創(chuàng)嘉友知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11447
• 代理人: 魏云鹿

1.一種語義完整性確定方法，其特征在于，所述方法包括：

通過預(yù)先訓(xùn)練好的文本預(yù)測模型對第一待處理文本進(jìn)行預(yù)測，確定目標(biāo)元素位置對應(yīng)的目標(biāo)概率表；其中，

所述目標(biāo)元素位置為所述第一待處理文本最后一個文本元素之后且緊鄰所述最后一個文本元素的元素位置，所述目標(biāo)概率表用于表征預(yù)設(shè)的元素集合包含的多個文本元素中的每個文本元素出現(xiàn)在所述目標(biāo)元素位置的預(yù)測概率；

根據(jù)所述目標(biāo)概率表，確定所述元素集合中的每個目標(biāo)文本元素對應(yīng)的預(yù)測概率，以根據(jù)所述每個目標(biāo)文本元素對應(yīng)的預(yù)測概率，確定所述第一待處理文本的語義是否完整，所述目標(biāo)文本元素用于表征所述第一待處理文本的語義完整性。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述通過預(yù)先訓(xùn)練好的文本預(yù)測模型對第一待處理文本進(jìn)行預(yù)測，確定目標(biāo)元素位置對應(yīng)的目標(biāo)概率表，包括：

將所述第一待處理文本作為所述文本預(yù)測模型的輸入，得到所述文本預(yù)測模型輸出的預(yù)測文本以及所述預(yù)測文本中的每個元素位置對應(yīng)的概率表；

其中，所述預(yù)測文本包括的文本元素與所述第一待處理文本包括的文本元素一一對應(yīng)，所述預(yù)測文本的每個文本元素表征為所對應(yīng)所述第一待處理文本的文本元素預(yù)測的該所對應(yīng)文本元素所在位置下一個位置出現(xiàn)的文本元素；所述預(yù)測文本中的每個元素位置對應(yīng)的概率表表征該元素位置出現(xiàn)的文本元素的預(yù)測概率；

將所述預(yù)測文本中的最后一個元素位置對應(yīng)的概率表確定為所述目標(biāo)概率表。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述目標(biāo)文本元素包括多個用于表征文本結(jié)束的終結(jié)文本元素；

所述根據(jù)所述目標(biāo)概率表，確定所述元素集合中的每個目標(biāo)文本元素對應(yīng)的預(yù)測概率，以根據(jù)所述每個目標(biāo)文本元素對應(yīng)的預(yù)測概率，確定所述第一待處理文本的語義是否完整，包括：

根據(jù)所述目標(biāo)概率表，確定每個所述終結(jié)文本元素的預(yù)測概率；

對每個所述終結(jié)文本元素的預(yù)測概率進(jìn)行預(yù)設(shè)運(yùn)算，得到運(yùn)算結(jié)果；

根據(jù)所述運(yùn)算結(jié)果確定所述第一待處理文本的語義是否完整。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述目標(biāo)文本元素包括終止元素、虛詞元素和符號元素，所述終止元素為用于表征文本結(jié)束的文本元素，所述虛詞元素為用于表征詞性為虛詞的文本元素，所述符號元素為用于表征標(biāo)點(diǎn)符號的文本元素；

所述根據(jù)所述目標(biāo)概率表，確定所述元素集合中的每個目標(biāo)文本元素對應(yīng)的預(yù)測概率，以根據(jù)所述每個目標(biāo)文本元素對應(yīng)的預(yù)測概率，確定所述第一待處理文本的語義是否完整，包括：

確定所述元素集合中包含的a個所述終止元素、b個所述虛詞元素以及c個所述符號元素，其中，a、b、c均為整數(shù)，且a＞0，b＞0，c＞0；

根據(jù)所述目標(biāo)概率表，獲取每個所述終止元素對應(yīng)的第一預(yù)測概率，每個所述虛詞元素對應(yīng)的第二預(yù)測概率，以及每個所述符號元素對應(yīng)的第三預(yù)測概率；

根據(jù)所述第一預(yù)測概率、所述第二預(yù)測概率以及所述第三預(yù)測概率，利用第一公式，確定目標(biāo)預(yù)測概率；

所述第一公式表示為：

其中，P_x為所述目標(biāo)預(yù)測概率，P_j為所述第一預(yù)測概率，P_k為所述第二預(yù)測概率，P_h為所述第三預(yù)測概率；

若所述目標(biāo)預(yù)測概率大于或等于預(yù)設(shè)的概率閾值，確定所述第一待處理文本的語義完整；或者，

若所述目標(biāo)預(yù)測概率小于所述概率閾值，確定所述第一待處理文本的語義不完整。

5.根據(jù)權(quán)利要求1-4中任一項(xiàng)所述的方法，其特征在于，所述方法還包括：

在確定所述第一待處理文本的語義不完整的情況下，執(zhí)行語義補(bǔ)充步驟，以獲取所述第一待處理文本對應(yīng)的語義完整的目標(biāo)文本。