[發(fā)明專利]基于人工智能的分詞方法、裝置、服務(wù)器和存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 201710448749.6
• 申請日: 2017-06-14
• 公開（公告）號: CN107273356B
• 公開（公告）日: 2020-08-11
• 發(fā)明（設(shè)計）人: 鄭利群;詹金波;肖求根;付志宏;何徑舟;周古月
• 申請（專利權(quán)）人: 北京百度網(wǎng)訊科技有限公司
• 主分類號: G06F40/289
• 分類號: G06F40/289
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

1.一種基于人工智能的分詞方法，其特征在于，包括：

獲取待分詞語料以及與設(shè)定分詞模板對應(yīng)的分詞模型；

根據(jù)設(shè)定匹配算法，匹配所述待分詞語料與所述分詞模型，獲取所述待分詞語料中滿足第一設(shè)定規(guī)則的目標(biāo)詞組；所述第一設(shè)定規(guī)則為目標(biāo)詞組包含漢字的個數(shù)的取值范圍；

根據(jù)所述目標(biāo)詞組修正與所述分詞模型和所述待分詞語料對應(yīng)的發(fā)射矩陣；

根據(jù)修正后的發(fā)射矩陣對所述待分詞語料進行分詞處理，得到第一分詞結(jié)果。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述目標(biāo)詞組修正與所述分詞模型和所述待分詞語料對應(yīng)的發(fā)射矩陣，包括：

獲取與所述分詞模型和所述待分詞語料對應(yīng)的發(fā)射矩陣；

確定所述目標(biāo)詞組中各漢字對應(yīng)的修正參數(shù)；

根據(jù)所述修正參數(shù)修正所述發(fā)射矩陣中所述各漢字對應(yīng)的權(quán)值。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述確定所述目標(biāo)詞組中各漢字對應(yīng)的修正參數(shù)，包括：

根據(jù)所述目標(biāo)詞組中各漢字在所述目標(biāo)詞組中的位置，確定所述各漢字對應(yīng)的修正參數(shù)的標(biāo)簽，其中，所述標(biāo)簽包括開頭、中間、結(jié)尾和單字詞組；

根據(jù)設(shè)定數(shù)值確定所述各漢字對應(yīng)的修正參數(shù)的數(shù)值。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述根據(jù)所述修正參數(shù)修正所述發(fā)射矩陣中與所述各漢字對應(yīng)的權(quán)值，包括：

根據(jù)所述標(biāo)簽確定所述發(fā)射矩陣中所述各漢字的待修正權(quán)值；

根據(jù)所述修正參數(shù)的數(shù)值修正所述待修正權(quán)值。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述根據(jù)所述修正參數(shù)的數(shù)值修正所述待修正權(quán)值，包括：

對所述修正參數(shù)的數(shù)值與所述待修正權(quán)值的數(shù)值求和，將求和結(jié)果作為所述待修正權(quán)值修正后的數(shù)值。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，在所述獲取待分詞語料以及與設(shè)定分詞模板對應(yīng)的分詞模型之前，還包括：

使用所述分詞模型對所述設(shè)定分詞模板進行分詞處理，得到第二分詞結(jié)果；

根據(jù)第二設(shè)定規(guī)則比較所述第二分詞結(jié)果和所述設(shè)定分詞模板，獲取更新參數(shù)；

根據(jù)所述更新參數(shù)，修正所述分詞模型；

根據(jù)修正后的分詞模型和所述設(shè)定分詞模板生成與所述設(shè)定分詞模板對應(yīng)的分詞模型。

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)修正后的發(fā)射矩陣對所述待分詞語料進行分詞處理，得到第一分詞結(jié)果，包括：

獲取所述分詞模型對應(yīng)的轉(zhuǎn)移矩陣；

對所述轉(zhuǎn)移矩陣和修正后的發(fā)射矩陣進行馬爾可夫解碼，得到第一分詞結(jié)果。

8.一種基于人工智能的分詞裝置，其特征在于，包括：

模型獲取模塊，用于獲取待分詞語料以及與設(shè)定分詞模板對應(yīng)的分詞模型；

詞組獲取模塊，用于根據(jù)設(shè)定匹配算法，匹配所述待分詞語料與所述分詞模型，獲取所述待分詞語料中滿足第一設(shè)定規(guī)則的目標(biāo)詞組；所述第一設(shè)定規(guī)則為目標(biāo)詞組包含漢字的個數(shù)的取值范圍；

矩陣修正模塊，用于根據(jù)所述目標(biāo)詞組修正與所述分詞模型和所述待分詞語料對應(yīng)的發(fā)射矩陣；

分詞處理模塊，用于根據(jù)修正后的發(fā)射矩陣對所述待分詞語料進行分詞處理，得到第一分詞結(jié)果。

9.一種服務(wù)器，其特征在于，所述服務(wù)器包括：

一個或多個處理器；

存儲裝置，用于存儲一個或多個程序，

當(dāng)所述一個或多個程序被所述一個或多個處理器執(zhí)行，使得所述一個或多個處理器實現(xiàn)如權(quán)利要求1-7中任一所述的基于人工智能的分詞方法。

10.一種包含計算機可執(zhí)行指令的存儲介質(zhì)，所述計算機可執(zhí)行指令在由計算機處理器執(zhí)行時用于執(zhí)行如權(quán)利要求1-7中任一所述的基于人工智能的分詞方法。