[發明專利]文本處理方法和裝置

有效

• 申請號: 202111130296.5
• 申請日: 2021-09-26
• 公開（公告）號: CN113919344B
• 公開（公告）日: 2022-09-23
• 發明（設計）人: 黃劍輝
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06F40/289
• 分類號: G06F40/289;G06F40/205;G06K9/62
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 熊永強;賈允

本申請提供了一種文本處理方法和裝置，涉及互聯網技術領域，可以應用于云技術、人工智能、智慧交通、輔助駕駛等各種場景，方法包括：獲取目標文本對應的文本分詞序列和多個待識別詞；分別獲取文本分詞序列對應的文本特征向量和多個待識別詞各自對應的分詞特征向量；基于低秩參數矩陣分別將各分詞特征向量與文本特征向量進行特征融合處理，得到多個待識別詞各自對應的目標特征向量；根據目標特征向量從多個待識別詞中識別出目標文本對應的目標詞。基于上述方案，本申請能夠有效提高訓練效率和文本分析效率，以及目標詞識別的準確性。

技術領域

本申請涉及人工智能技術領域，尤其涉及一種文本處理方法和裝置。

背景技術

隨計算機技術的發展，基于人工智能的文本分析處理技術在語義理解、文本檢索、網絡監管和推薦任務等場景中得到了廣泛應用。文本分析處理的核心在于識別句子中的核心成分，并去除冗余成分的影響，從而在業務應用中減少句子中非主成分對句子整體語義的影響。現有技術中通常采用統計或分類的方式進行文本分析處理，但存在文本主成分提取準確率低，語義理解偏差大，以及分析效率低等缺陷。

因此，需提供一種改進的文本處理方案，以提高文本分析的準確率和效率。

發明內容

本申請提供了一種文本處理方法和裝置，可以有效提高文本分析的準確率和效率。

一方面，本申請提供了一種文本處理方法，所述方法包括：

獲取目標文本對應的文本分詞序列和多個待識別詞；

分別獲取所述文本分詞序列對應的文本特征向量和所述多個待識別詞各自對應的分詞特征向量；

基于低秩參數矩陣分別將各分詞特征向量與所述文本特征向量進行特征融合處理，得到所述多個待識別詞各自對應的目標特征向量；

根據所述目標特征向量從所述多個待識別詞中識別出所述目標文本對應的目標詞。

另一方面提供了一種文本處理裝置，所述裝置包括：

第一獲取模塊：用于獲取目標文本對應的文本分詞序列和多個待識別詞；

第二獲取模塊：用于分別獲取所述文本分詞序列對應的文本特征向量和所述多個待識別詞各自對應的分詞特征向量；

特征融合模塊：用于基于低秩參數矩陣分別將各分詞特征向量與所述文本特征向量進行特征融合處理，得到所述多個待識別詞各自對應的目標特征向量；

分詞識別模塊：用于根據所述目標特征向量從所述多個待識別詞中識別出所述目標文本對應的目標詞。

另一方面提供了一種文本處理設備，所述設備包括處理器和存儲器，所述設備包括處理器和存儲器，所述存儲器中存儲有至少一條指令或至少一段程序，所述至少一條指令或所述至少一段程序由所述處理器加載并執行以實現如上述的文本處理方法。

另一方面提供了一種計算機可讀存儲介質，所述存儲介質中存儲有至少一條指令或至少一段程序，所述至少一條指令或所述至少一段程序由處理器加載并執行以實現如上述的文本處理方法。

另一方面提供了一種文本處理終端，所述終端包括處理器和存儲器，所述設備包括處理器和存儲器，所述存儲器中存儲有至少一條指令或至少一段程序，所述至少一條指令或所述至少一段程序由所述處理器加載并執行以實現如上述的文本處理方法。

另一方面提供了一種服務器，所述服務器包括處理器和存儲器，所述設備包括處理器和存儲器，所述存儲器中存儲有至少一條指令或至少一段程序，所述至少一條指令或所述至少一段程序由所述處理器加載并執行以實現如上述的文本處理方法。

另一方面提供了一種計算機程序產品或計算機程序，該計算機程序產品或計算機程序包括計算機指令，該計算機指令被處理器執行時實現如上述的文本處理方法。