[發明專利]變形詞識別方法和裝置

在審

• 申請號: 201911040805.8
• 申請日: 2019-10-30
• 公開（公告）號: CN112749555A
• 公開（公告）日: 2021-05-04
• 發明（設計）人: 鄭佳歡;付華崢;陳康;向勇;陳翀;劉春;關迎輝;鄭永坤;張海平;蔡鳳恩
• 申請（專利權）人: 中國電信股份有限公司
• 主分類號: G06F40/284
• 分類號: G06F40/284
• 代理公司: 中國貿促會專利商標事務所有限公司 11038
• 代理人: 許蓓

1.一種變形詞識別方法，其特征在于，包括：

根據待識別的變形詞所在的語料，計算所述變形詞的詞向量；

根據所述變形詞所屬的詞圖關系網絡的子群中的所述變形詞的鄰居詞語節點，構建所述變形詞的詞圖向量；

根據所述變形詞的詞向量和詞圖向量，構建所述變形詞的綜合描述向量；

匹配所述變形詞的綜合描述向量與關鍵詞庫中的關鍵詞的綜合描述向量，以識別所述變形詞。

2.根據權利要求1所述的方法，其特征在于，計算所述變形詞的詞圖向量包括：

根據所述變形詞的各個鄰居詞語節點的重要性度量值，對所述變形詞的相應鄰居詞語節點的詞向量進行加權求和，得到所述變形詞的詞圖向量。

3.根據權利要求1所述的方法，其特征在于，所述詞圖關系網絡包括多個節點和連接不同節點的邊，

其中，多個節點包括語料中的詞，連接不同節點的邊在所述不同節點在語料中同時出現的頻次達到預設值時存在，邊的權值由語料中同時出現所述不同節點的頻次大小決定。

4.根據權利要求1所述的方法，其特征在于，所述詞圖關系網絡的子群是利用隨機游走算法對所述詞圖關系網絡進行分割得到的。

5.根據權利要求3所述的方法，其特征在于，所述多個節點還包括變形詞和關鍵詞經過預設轉換后得到的轉換詞，

所述預設轉換包括：將中文字轉換為其拼音或拼音首字母、拆分中文字的偏旁和部首。

6.根據權利要求1所述的方法，其特征在于，所述變形詞所在的語料包括：

直接包括所述變形詞的語料和間接包括所述變形詞的語料中的一個或全部，

其中，如果原始詞經過預設轉換得到所述變形詞，則間接包括所述變形詞的語料是指：所述原始詞所在的語料并將其中的原始詞替換為所述變形詞后得到的語料；

其中，所述預設轉換包括：將中文字轉換為其拼音或拼音首字母、拆分中文字的偏旁和部首。

7.根據權利要求5或6所述的方法，其特征在于，

當轉換之前的一個詞包括多個字時，所述多個字經過一種或多種預設變換得到轉換詞。

8.根據權利要求5或6所述的方法，其特征在于，

所述拼音或拼音首字母帶音調。

9.根據權利要求1所述的方法，其特征在于，所述變形詞被識別為與其匹配的關鍵詞，所述方法還包括：

將所述變形詞所在語料中的所述變形詞替換為與其匹配的關鍵詞；

對替換后的所述變形詞所在語料執行預設任務。

10.一種變形詞識別裝置，包括：

存儲器；以及

耦接至所述存儲器的處理器，所述處理器被配置為基于存儲在所述存儲器中的指令，執行權利要求1-9任一項所述的變形詞識別方法。

11.一種非瞬時性計算機可讀存儲介質，其上存儲有計算機程序，該程序被處理器執行時實現權利要求1-9任一項所述的變形詞識別方法。