[發明專利]一種應用在稅務問答系統的多輪智能問答交互方法

在審

• 申請號: 202011219766.0
• 申請日: 2020-11-05
• 公開（公告）號: CN112541059A
• 公開（公告）日: 2021-03-23
• 發明（設計）人: 王輝;趙德冀;寧博;王富東
• 申請（專利權）人: 大連中河科技有限公司
• 主分類號: G06F16/332
• 分類號: G06F16/332;G06F40/205;G06Q40/00;G06Q50/26
• 代理公司: 大連優路智權專利代理事務所(普通合伙) 21249
• 代理人: 宋春昕

本發明提供一種應用在稅務問答系統的多輪智能問答交互方法，屬于自然語言處理領域。可以應用在任務驅動型問答系統中，協助用戶完成任務。針對現有納稅人在咨詢稅務相關任務行問題時，使用該方法以獲取更好的用戶體驗。該方法包括：構建實體抽取器，構建謂詞抽取器，構建意圖抽取器，構建對話記憶模塊，上文歷史對話與下文對話拼接，使用結合自注意力機制的Sequence to Sequence的模型處理。本發明的面向稅務的多輪問答交互方法可以有效的提升稅務方面問題回答的準確率。

技術領域

本發明涉及自然語言處理技術領域，具體而言，尤其涉及一種面向稅務的多輪智能問 答交互方法。

背景技術

12366納稅服務熱線是納稅人咨詢稅務問題的最主要途徑。但由于納稅人眾多、問題種 類也繁多復雜，導致客服人員的解答效率不高。且由于現有的智能問答系統使用基于單輪 對話的方法，無法捕捉到用戶之前的問題，導致系統不能進一步根據提問者的問題給出相 應合適答案，進而加大了客服人員的工作負擔，用戶對系統的使用體驗下降。

發明內容

根據以上提出的技術問題，并且基于現有的面向稅務智能問答系統，提供了一種新的 可以應用在稅務問答系統的多輪智能問答交互方法。

本發明采用的技術手段如下：

一種可以應用于稅務智能問答系統的多輪問答算法。其中所述多輪問答算法模塊包括：

實體抽取器：用于對用戶的歷史對話進行實體抽取，以便于為最后一次回答提供數據。

謂詞抽取器：用于對用戶的歷史對話進行謂詞抽取，以便于為最后一次回答提供數據。

意圖抽取器：用于對根據本輪抽取得到的實體和謂詞序列，預測用戶提問的問題，為 下一個問題縮小答案范圍。

對話記憶模塊：用于將之前的實體抽取器，謂詞抽取器，意圖抽取器所獲得的內容進 行保存，并且根據本輪中的實體，謂詞和意圖，采用自注意力機制進行計算。根據針對稅務項目的實際考察，應用于稅務的多輪問答算法，只保存三輪對話信息。

模型計算：用于對稅務知識庫中的問答數據采用Bert預訓練模型完成的詞向量和本輪 的實體抽取器，謂詞抽取器，意圖抽取器和對話記憶模塊中的數據整合。

進一步地，系統在對話與回復的階段，采用Sequence to Sequence結構，通過將對話 記憶模塊中的整合數據和用戶當前的問題進行編碼，并且采用自注意力機制，從而得到更 加合適的答案。

進一步地，所述實體抽取器，意圖抽取器，謂詞抽取器，均采用BI-GRU編碼，其編碼過程如下：

重置門計算：輸入為上一時刻的隱藏層狀態h_t-1和當前時刻的輸入詞x_t，從而重置門的 計算公式為：

r_t＝σ(W_r·[h_t-1,x_t])

更新門計算：輸入為上一時刻的隱藏層狀態h_t-1和當前時刻的輸入詞x_t，從而重置門的 計算公式為：

z_t＝σ(W_z·[h_t-1,x_t])

得到門控信號之后，首先使用重置門控來得到“重置”之后的數據，h^t-1′＝h^t-1⊙r，再將h^t-1'和輸入x_t拼接，再通過一個tanh激活函數來將數據放縮到-1～1的范圍內。得到的：