[發(fā)明專利]輸入法詞頻調(diào)整方法及裝置

在審

• 申請?zhí)枺?/td>: 202110357086.3
• 申請日: 2021-04-01
• 公開（公告）號: CN113177403A
• 公開（公告）日: 2021-07-27
• 發(fā)明（設計）人: 沈哲吉;賈昌鑫;朱相宇;王映新
• 申請（專利權(quán)）人: 北京華宇信息技術(shù)有限公司
• 主分類號: G06F40/216
• 分類號: G06F40/216;G06F3/023;G06F40/289
• 代理公司: 北京中索知識產(chǎn)權(quán)代理有限公司 11640
• 代理人: 胡大成

1.一種輸入法詞頻調(diào)整方法，其特征在于，包括以下步驟：

獲取語料數(shù)據(jù)；

通過分詞模型，對所述語料數(shù)據(jù)進行分詞，生成若干分詞單元；

通過識音模型，對所述分詞單元進行注音，生成分詞單元音節(jié)；

將音節(jié)相同的分詞單元保存至同一音節(jié)詞庫；

統(tǒng)計同一音節(jié)詞庫中第一分詞單元的出現(xiàn)概率；

將所述第一分詞單元的出現(xiàn)概率與預設閾值進行比較，得到比較結(jié)果；

根據(jù)比較結(jié)果，調(diào)整第一分詞單元的詞頻；

根據(jù)調(diào)整后所述第一分詞單元的詞頻，以預設順序排列第一分詞單元所在音節(jié)詞庫的分詞單元順序，更新音節(jié)詞庫。

2.如權(quán)利要求1所述的輸入法詞頻調(diào)整方法，其特征在于，根據(jù)比較結(jié)果，調(diào)整第一分詞單元的詞頻，具體包括：

當?shù)谝环衷~單元在同一音節(jié)詞庫中的出現(xiàn)概率大于、等于預設閾值，增強所述第一分詞單元的詞頻；

當?shù)谝环衷~單元在同一音節(jié)詞庫中的出現(xiàn)概率小于預設閾值，衰弱所述第一分詞單元的詞頻。

3.如權(quán)利要求2所述的輸入法詞頻調(diào)整方法，其特征在于，當?shù)谝环衷~單元在同一音節(jié)詞庫中的出現(xiàn)概率大于、等于預設閾值，增強所述第一分詞單元的詞頻，具體包括：

根據(jù)所述第一分詞單元在同一音節(jié)詞庫中的出現(xiàn)概率，計算所述第一分詞單元在第K輪調(diào)整中的調(diào)整權(quán)重系數(shù)；其表示如下：

式中，a_k,i為所述第一分詞單元w_i在第K輪調(diào)整中的調(diào)整權(quán)重系數(shù)，P(w_i|s)為第一分詞單元w_i在同一音節(jié)s詞庫中的出現(xiàn)概率；

根據(jù)所述第一分詞單元在第K輪調(diào)整中的調(diào)整權(quán)重系數(shù)，計算所述第一分詞單元在第K輪調(diào)整中的詞頻權(quán)重系數(shù)；其表示如下：

式中，e_k,i為所述第一分詞單元w_i在第K輪調(diào)整中的詞頻權(quán)重系數(shù)，a_k,i為所述第一分詞單元w_i在第K輪調(diào)整中的調(diào)整權(quán)重系數(shù)；

根據(jù)所述第一分詞單元在第K輪調(diào)整中的詞頻權(quán)重系數(shù)，計算所述第一分詞單元在第K+1輪調(diào)整中的詞頻；其表示如下：

式中，freq_k+1,i為第一分詞單元w_i在第K+1輪調(diào)整中的詞頻，e_k,i為所述第一分詞單元w_i在第K輪調(diào)整中的詞頻權(quán)重系數(shù)，Z_k為所述第一分詞單元w_i的詞頻更新，且

4.如權(quán)利要求2所述的輸入法詞頻調(diào)整方法，其特征在于，當?shù)谝环衷~單元在同一音節(jié)詞庫中的出現(xiàn)概率小于預設閾值，衰弱所述第一分詞單元的詞頻，具體包括：

根據(jù)所述第一分詞單元在同一音節(jié)詞庫中的出現(xiàn)概率，計算所述第一分詞單元在第K輪調(diào)整中的調(diào)整權(quán)重系數(shù)；其表示如下：

式中，a_k,i為所述第一分詞單元w_i在第K輪調(diào)整中的調(diào)整權(quán)重系數(shù)，P(w_i|s)為所述第一分詞單元w_i在同一音節(jié)s詞庫中的出現(xiàn)概率；

根據(jù)所述第一分詞單元在第K輪調(diào)整中的調(diào)整權(quán)重系數(shù)，計算所述第一分詞單元在第K輪調(diào)整中的詞頻權(quán)重系數(shù)；其表示如下：

式中，e_k,i為所述第一分詞單元w_i在第K輪調(diào)整中的詞頻權(quán)重系數(shù)，a_k,i為所述第一分詞單元w_i在第K輪調(diào)整中的調(diào)整權(quán)重系數(shù)；

根據(jù)所述第一分詞單元在第K輪調(diào)整中的詞頻權(quán)重系數(shù)，計算所述第一分詞單元在第K+1輪調(diào)整中的詞頻；其表示如下：

式中，freq_k+1,i為第一分詞單元w_i在第K+1輪調(diào)整中的詞頻，e_k,i為所述第一分詞單元w_i在第K輪調(diào)整中的詞頻權(quán)重系數(shù)，Z_k為所述第一分詞單元w_i的詞頻更新，且