[發明專利]人機對話質量評估方法、裝置、計算機設備及存儲介質

在審

• 申請號: 201711321047.8
• 申請日: 2017-12-12
• 公開（公告）號: CN108255943A
• 公開（公告）日: 2018-07-06
• 發明（設計）人: 龐翔宇;張雅茜;王天
• 申請（專利權）人: 百度在線網絡技術(北京)有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30;G06Q10/06
• 代理公司: 北京鴻德海業知識產權代理事務所(普通合伙) 11412
• 代理人: 袁媛

本發明公開了人機對話質量評估方法、裝置、計算機設備及存儲介質，其中方法包括：獲取待評估的對話；分別獲取待評估的對話對應的對話質量類型以及用戶滿意度類型；根據獲取到的對話質量類型以及用戶滿意度類型確定出待評估的對話的質量評分。應用本發明所述方案，能夠提高評估結果的準確性等。

【技術領域】

本發明涉及計算機應用技術，特別涉及人機對話質量評估方法、裝置、計算機設備及存儲介質。

【背景技術】

目前，人工對話產品的應用越來越廣泛，如采用開放式聊天方式的度秘等。

作為人機對話產品的開發者，需要準確的得知機器人聊天的質量，以便及時地調整和優化機器人的聊天水平。

為此，需要進行人機對話(session)質量評估。現有技術中，通常采用主觀評估方式，即主觀判斷對話質量的好或壞，但主觀判斷容易受到當時環境的干擾，且無準確的標度，因此評估結果的準確性較低。

【發明內容】

有鑒于此，本發明提供了人機對話質量評估方法、裝置、計算機設備及存儲介質，能夠提高評估結果的準確性。

具體技術方案如下：

一種人機對話質量評估方法，包括：

獲取待評估的對話；

分別獲取所述待評估的對話對應的對話質量類型以及用戶滿意度類型；

根據獲取到的對話質量類型以及用戶滿意度類型確定出所述待評估的對話的質量評分。

根據本發明一優選實施例，所述分別獲取所述待評估的對話對應的對話質量類型以及用戶滿意度類型包括：

從所述待評估的對話中截取出前N輪對話內容，N為大于一的正整數，將截取出的對話內容作為處理對象；

獲取所述處理對象對應的對話質量類型以及用戶滿意度類型。

根據本發明一優選實施例，所述從所述待評估的對話中截取出前N輪對話內容包括：

按照以下原則從所述待評估的對話中截取出前N輪對話內容：

同一輪對話內容中，相鄰兩條對話信息之間間隔的時長小于或等于預定閾值；

以及，相鄰兩輪對話內容中，前一輪對話內容中的最后一條對話信息與下一輪對話內容中的第一條對話信息之間間隔的時長大于所述預定閾值。

根據本發明一優選實施例，該方法進一步包括：

若所述待評估的對話中少于或等于N輪對話內容，則將所述待評估的對話作為所述處理對象。

根據本發明一優選實施例，所述獲取所述處理對象對應的對話質量類型包括：

獲取根據所述處理對象中的以下內容確定出的對話質量類型：是否出現影響對話質量的問題、出現問題的比例、是否出現提升對話質量的加分項。

根據本發明一優選實施例，所述影響對話質量的問題包括：嚴重問題和普通問題；

其中，在統計比例時，僅統計嚴重問題的出現比例，將一個普通問題視為x個嚴重問題進行處理，x大于0且小于1；

所述提升對話質量的加分項包括：有趣和有內容。

根據本發明一優選實施例，所述獲取所述處理對象對應的用戶滿意度類型包括：

獲取根據所述處理對象中的以下內容確定出的用戶滿意度類型：是否出現來自用戶的評價信息、評價信息的類型、不同類型的評價信息的出現時機；其中，評價信息的類型包括：正面的評價信息以及負面的評價信息。