[發明專利]確定質檢效果的方法、裝置、設備及存儲介質

在審

• 申請號: 201910571707.0
• 申請日: 2019-06-28
• 公開（公告）號: CN110414790A
• 公開（公告）日: 2019-11-05
• 發明（設計）人: 肖炳陽
• 申請（專利權）人: 深圳追一科技有限公司
• 主分類號: G06Q10/06
• 分類號: G06Q10/06;G06Q30/00
• 代理公司: 廣州華進聯合專利商標代理有限公司 44224
• 代理人: 金無量

本申請公開了一種確定質檢效果的方法、裝置、設備及存儲介質，屬于計算機技術領域。所述方法包括：獲取計算機設備對目標內容對象的機器質檢結果，機器質檢結果包括計算機設備檢出的觸發片段和未觸發規則，觸發片段是目標內容對象中滿足檢出規則的內容片段，未觸發規則是目標內容對象不滿足的檢出規則；獲取質檢人員對目標內容對象的人工質檢結果，人工質檢結果包括質檢人員檢出的觸發片段和未觸發規則；比較機器質檢結果和人工質檢結果，并根據比較結果確定計算機設備對內容對象進行質檢的效果。本申請實施例提供的技術方案提供了一種對計算機設備質檢的效果進行評估的方法，解決了無法對計算機設備質檢的效果進行評估的問題。

技術領域

本申請涉及計算機技術領域，特別是涉及確定質檢效果的方法、裝置、設備及存儲介質。

背景技術

當前，為了給用戶提供更加優質的服務，許多企業都配備有直接對用戶進行服務的客服人員。為了保證服務質量，實際應用中，通常需要對客服人員與用戶之間的對話(也即是客服對話內容)進行質檢。

現有技術中，為了提高質檢效率，可以由計算機設備根據預先設定的檢出規則對客服對話內容進行質檢。

但是，如何對計算機設備質檢的效果進行評估已經成為了一個亟需解決的問題。

發明內容

基于此，有必要針對無法對計算機設備質檢的效果進行評估的問題，提供一種確定質檢效果的方法、裝置、設備及存儲介質。

獲取計算機設備對目標內容對象的機器質檢結果，機器質檢結果包括計算機設備檢出的觸發片段和未觸發規則，觸發片段是目標內容對象中滿足檢出規則的內容片段，未觸發規則是目標內容對象不滿足的檢出規則；

獲取質檢人員對目標內容對象的人工質檢結果，人工質檢結果包括質檢人員檢出的觸發片段和未觸發規則；

比較機器質檢結果和人工質檢結果，并根據比較結果確定計算機設備對內容對象進行質檢的效果。

在本申請的一個實施例中，比較機器質檢結果和人工質檢結果，包括：

對計算機設備檢出的觸發片段和質檢人員檢出的觸發片段進行比較，得到正確觸發片段的個數和漏檢觸發片段的個數；

其中，正確觸發片段包括計算機設備與質檢人員均檢出的觸發片段，漏檢觸發片段包括計算機設備未檢出而質檢人員檢出的觸發片段。

在本申請的一個實施例中，根據比較結果確定計算機設備對內容對象進行質檢的效果，包括：

獲取正確觸發片段的個數和漏檢觸發片段的個數的第一和值；

獲取正確觸發片段的個數與第一和值的第一比值；

將第一比值確定為查出率，查出率用于指示計算機設備對內容對象進行質檢時能夠正確檢出觸發片段的概率。

在本申請的一個實施例中，比較機器質檢結果和人工質檢結果，還包括：

對計算機設備檢出的觸發片段和質檢人員檢出的觸發片段進行比較，得到誤檢觸發片段的個數，誤檢觸發片段包括計算機設備檢出而質檢人員未檢出的觸發片段；

對計算機設備檢出的未觸發規則和質檢人員檢出的未觸發規則進行比較，得到正確未觸發規則的個數，正確未觸發規則包括計算機設備和質檢人員均檢出的未觸發規則。

在本申請的一個實施例中，根據比較結果確定計算機設備對內容對象進行質檢的效果，包括：

獲取正確觸發片段的個數和正確未觸發規則的個數的第二和值；

獲取正確觸發片段的個數、漏檢觸發片段的個數、誤檢觸發片段的個數和正確未觸發規則的個數的第三和值；

獲取第二和值和第三和值的第二比值；