[發(fā)明專利]文本分類和展示方法、裝置、計算機(jī)設(shè)備及存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 201810385958.5
• 申請日: 2018-04-26
• 公開（公告）號: CN108563786B
• 公開（公告）日: 2019-12-20
• 發(fā)明（設(shè)計）人: 方小敏;符帆;羅梓奇
• 申請（專利權(quán)）人: 騰訊科技(深圳)有限公司
• 主分類號: G06F16/35
• 分類號: G06F16/35;G06F17/27
• 代理公司: 44224 廣州華進(jìn)聯(lián)合專利商標(biāo)代理有限公司
• 代理人: 李文淵;黃晶晶

本申請涉及一種文本分類和展示方法、裝置、計算機(jī)設(shè)備及存儲介質(zhì)，該文本分類方法包括：從待分類的文本的分詞結(jié)果中確定部分目標(biāo)類別的分詞結(jié)果；為包括目標(biāo)類別的分詞結(jié)果的文本添加目標(biāo)類別的分類標(biāo)記，并為不包括目標(biāo)類別的分詞結(jié)果的文本添加非目標(biāo)類別的分類標(biāo)記；按待分類的文本和所添加的分類標(biāo)記進(jìn)行模型訓(xùn)練，得到分類模型；將各分詞結(jié)果輸入分類模型中，輸出各分詞結(jié)果屬于目標(biāo)類別的概率；將屬于目標(biāo)類別的概率大于或等于第一概率閾值的分詞結(jié)果重新確定為目標(biāo)類別的分詞結(jié)果，返回為包括目標(biāo)類別的分詞結(jié)果的文本添加目標(biāo)類別的分類標(biāo)記并繼續(xù)處理，直至滿足迭代停止條件時得到待分類的文本的分類標(biāo)記。本申請的方案提高了處理效率。

技術(shù)領(lǐng)域

本發(fā)明涉及計算機(jī)技術(shù)領(lǐng)域，特別是涉及一種文本分類和展示方法、裝置、計算機(jī)設(shè)備及存儲介質(zhì)。

背景技術(shù)

隨著科學(xué)技術(shù)的飛速發(fā)展，大數(shù)據(jù)時代逐步到來，數(shù)據(jù)處理方式多種多樣。其中，數(shù)據(jù)分類由于能夠在多方面起到重要作用，所以越來越受到大家的重視。

傳統(tǒng)方法在一些場景下需要通過人工為大量數(shù)據(jù)添加分類標(biāo)記。比如，在進(jìn)行有監(jiān)督的機(jī)器學(xué)習(xí)訓(xùn)練時，需要提前準(zhǔn)備大批未分類的樣本數(shù)據(jù)，通過人工為全量的大批未分類的樣本數(shù)據(jù)一一添加分類標(biāo)記，才能基于人工添加的分類標(biāo)記后的樣本數(shù)據(jù)進(jìn)行有監(jiān)督的機(jī)器學(xué)習(xí)訓(xùn)練。因此，傳統(tǒng)方法通過人工方式為大量樣本數(shù)據(jù)添加分類標(biāo)記的效率比較低。

發(fā)明內(nèi)容

基于此，有必要針對傳統(tǒng)方法通過人工方式為大量樣本數(shù)據(jù)添加分類標(biāo)記的效率比較低的問題，提供一種文本分類和展示方法、裝置、計算機(jī)設(shè)備及存儲介質(zhì)。

一種文本分類方法，所述方法包括：

從待分類的文本的分詞結(jié)果中確定部分目標(biāo)類別的分詞結(jié)果；

為包括所述目標(biāo)類別的分詞結(jié)果的文本添加目標(biāo)類別的分類標(biāo)記，以及為不包括所述目標(biāo)類別的分詞結(jié)果的文本添加非目標(biāo)類別的分類標(biāo)記；

根據(jù)待分類的文本和所添加的分類標(biāo)記進(jìn)行模型訓(xùn)練，得到分類模型；

將各分詞結(jié)果輸入所述分類模型中，輸出各分詞結(jié)果屬于目標(biāo)類別的概率；

將屬于目標(biāo)類別的概率大于或等于第一概率閾值的分詞結(jié)果重新確定為目標(biāo)類別的分詞結(jié)果，返回所述為包括所述目標(biāo)類別的分詞結(jié)果的文本添加目標(biāo)類別的分類標(biāo)記并繼續(xù)處理，直至滿足迭代停止條件時得到待分類的文本的分類標(biāo)記。

一種文本分類裝置，所述裝置包括：

分詞結(jié)果確定模塊，用于從待分類的文本的分詞結(jié)果中確定部分目標(biāo)類別的分詞結(jié)果；

標(biāo)記添加模塊，用于為包括所述目標(biāo)類別的分詞結(jié)果的文本添加目標(biāo)類別的分類標(biāo)記，以及為不包括所述目標(biāo)類別的分詞結(jié)果的文本添加非目標(biāo)類別的分類標(biāo)記；

模型訓(xùn)練模塊，用于根據(jù)待分類的文本和所添加的分類標(biāo)記進(jìn)行模型訓(xùn)練，得到分類模型；

分類模塊，用于將各分詞結(jié)果輸入所述分類模型中，輸出各分詞結(jié)果屬于目標(biāo)類別的概率；將屬于目標(biāo)類別的概率大于或等于第一概率閾值的分詞結(jié)果重新確定為目標(biāo)類別的分詞結(jié)果，并通知標(biāo)記添加模塊工作，直至滿足迭代停止條件時得到待分類的文本的分類標(biāo)記。

一種計算機(jī)設(shè)備，包括存儲器和處理器，所述存儲器中存儲有計算機(jī)程序，所述計算機(jī)程序被處理器執(zhí)行時，使得所述處理器執(zhí)行如下步驟：

從待分類的文本的分詞結(jié)果中確定部分目標(biāo)類別的分詞結(jié)果；

為包括所述目標(biāo)類別的分詞結(jié)果的文本添加目標(biāo)類別的分類標(biāo)記，以及為不包括所述目標(biāo)類別的分詞結(jié)果的文本添加非目標(biāo)類別的分類標(biāo)記；

根據(jù)待分類的文本和所添加的分類標(biāo)記進(jìn)行模型訓(xùn)練，得到分類模型；