[發明專利]問答一致性的評估方法、裝置、電子設備及介質

在審

• 申請號: 202110593286.9
• 申請日: 2021-05-28
• 公開（公告）號: CN115408500A
• 公開（公告）日: 2022-11-29
• 發明（設計）人: 李澤康;張金超;費政聰
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06F16/332
• 分類號: G06F16/332;G06F16/33;G06F40/279;G06F40/30;G06K9/62
• 代理公司: 深圳市聯鼎知識產權代理有限公司 44232
• 代理人: 盧旺

本申請提供了一種問答一致性的評估方法、裝置、電子設備及介質。該方法包括：獲取第一應答模型的第一問詢語句，并獲取第二應答模型響應第一問詢語句生成的第一回復語句；基于第一回復語句，生成針對第一回復語句的第二問詢語句；將第二問詢語句輸入至第二應答模型，并獲取第二應答模型響應第二問詢語句生成的第二回復語句；根據第一回復語句與第二回復語句，對第二應答模型的問答一致性進行評估，能夠準確的判斷第二應答模型的問答一致性是否符合要求。

技術領域

本申請涉及計算機及通信技術領域，特別涉及一種問答一致性的評估方法、裝置、電子設備及介質。

背景技術

人工智能是計算機學科的一個分支，被認為是二十一世紀三大尖端技術之一。近三十年來人工智能獲得了迅速的發展，在很多學科領域都獲得了廣泛應用，并取得了豐碩的成果。

人工智能技術中的自然語言處理技術可以用于實現智能問答，現有技術中，針對同一事實的問詢，由于使用的語句文本不同，問答機器人可能會出現不同的回答，從而出現問答不一致的問題，導致用戶無法獲得確定答案。

發明內容

本申請旨在提供一種問答一致性的評估方法、裝置、電子設備及介質，能夠對應答模型的問答一致性進行評估，從而準確的判斷第二應答模型的問答一致性是否符合要求。

根據本申請實施例的一個方面，提供了一種問答一致性的評估方法，包括：獲取第一應答模型的第一問詢語句，并獲取所述第二應答模型響應所述第一問詢語句生成的第一回復語句；基于所述第一回復語句，生成針對所述第一回復語句的第二問詢語句；將所述第二問詢語句輸入至所述第二應答模型，并獲取所述第二應答模型響應所述第二問詢語句生成的第二回復語句；根據所述第一回復語句與所述第二回復語句，對所述第二應答模型的問答一致性進行評估。

根據本申請實施例的一個方面，提供了一種問答一致性的評估裝置，包括：獲取模塊，配置為獲取第一應答模型的第一問詢語句，并獲取所述第二應答模型響應所述第一問詢語句生成的第一回復語句；生成模塊，配置為基于所述第一回復語句，生成針對所述第一回復語句的第二問詢語句；發送模塊，配置為將所述第二問詢語句輸入至所述第二應答模型，并獲取所述第二應答模型響應所述第二問詢語句生成的第二回復語句；比較模塊，配置為根據所述第一回復語句與所述第二回復語句，對所述第二應答模型的問答一致性進行評估。

在本申請的一個實施例中，基于前述方案，所述生成模塊配置為：識別所述第一回復語句中的目標詞；基于所述第一回復語句和所述目標詞，生成針對所述目標詞進行問詢的第二問詢語句。

在本申請的一個實施例中，基于前述方案，所述生成模塊配置為：對所述第一回復語句進行分詞處理，得到多個回復單詞；從所述多個回復單詞中選取用于表示事實和/或觀點的實體詞，作為所述目標詞。

在本申請的一個實施例中，基于前述方案，所述生成模塊配置為：將所述第一回復語句和所述目標詞進行組合，得到回復組合；基于所述回復組合的語義，將所述回復組合拆分成多個語義單元；分別確定各個語義單元對應的單元表征向量，得到多個單元表征向量；基于所述多個單元表征向量，生成所述第二問詢語句。

在本申請的一個實施例中，基于前述方案，所述生成模塊配置為：將所述多個單元表征向量輸入至特征提取單元組合，得到所述特征提取單元組合輸出的單詞表征向量；基于所述單詞表征向量從詞匯表的候選單詞中，選取所述第二問詢語句中位于首位的起始問詢單詞；將所述多個單元表征向量和所述單詞表征向量，重新輸入至所述特征提取單元組合，得到所述第二問詢語句中的下一問詢單詞對應的下一單詞表征向量，基于所述下一單詞表征向量從所述候選單詞中，選取所述第二問詢語句中的下一問詢單詞，直至完成確定。