[發明專利]一種車載語音云用戶體驗質量路測方法

有效

• 申請號: 201910664375.0
• 申請日: 2019-07-23
• 公開（公告）號: CN110417589B
• 公開（公告）日: 2022-11-29
• 發明（設計）人: 安媛
• 申請（專利權）人: 徐州工程學院
• 主分類號: H04L43/55
• 分類號: H04L43/55;H04L41/142;H04L41/22;H04L43/0852;G10L15/01;G09B29/00
• 代理公司: 深圳國聯專利代理事務所(特殊普通合伙) 44465
• 代理人: 王天興

1.一種車載語音云用戶體驗質量路測方法，其特征在于：一種車載語音云用戶體驗質量路測方法，其特征在于基于用戶行為腳本的業務測試發起方法、在線時延和識別精度自動分析方法、基于實際響應時間和心理感知時間非線性映射的用戶體驗質量評價方法以及基于GIS的車載語音云業務用戶體驗質量展示方法；

所述的業務測試發起方法利用腳本描述典型語音云用戶的常用語音請求意圖比例和常見請求頻率以及常見請求語音長度，從語音庫提取語音樣本發送到云端語音識別服務器，并接收服務器反饋的識別信息，業務測試發起方法執行的同時，在線時延和識別精度自動分析方法記錄數據包，根據請求數據包應用層數據特征和反饋數據包特征計算響應時延，根據反饋文本和語音樣本庫預存的對應文本比對結果計算反饋精度，這里采用關鍵詞而不是全部文本比對結果判斷識別對于業務執行的效果，根據實驗樣本和心理指標的韋伯定律設計的車載語音云的用戶體驗質量評價方法將實際響應時間映射到心理感知時間，根據心理感知時間計算評價分值，根據識別精度確定最終用戶體驗評價分值，并用統一的公式一次性完成上述評價過程，評價用戶體驗質量的同時記錄業務發生的經緯度，基于GIS的車載語音云業務用戶體驗質量展示方法計算評價結果的數學期望，通過GIS系統把分值展示在地圖的道路上；

所述的基于實際響應時間和心理感知時間非線性映射的用戶體驗質量評價方法采用如下實驗所得公式量化用戶體驗質量：

其中，T為測試時延，P_SR為識別成功率，時延T為起止數據包的時延差值既是T＝Tr-Tc，tr從建立交互開始的第一個數據報文時間，tc數據業務完成后，確認結束的報文時間。

2.根據權利要求1所述的一種車載語音云用戶體驗質量路測方法，其特征在于：所述的基于用戶行為腳本的業務測試發起方法根據用戶常見語音請求類型、長度和頻度設置路測腳本，通過發送語音庫的典型測試樣例發起業務，同時記錄數據包。

3.根據權利要求1所述的一種車載語音云用戶體驗質量路測方法，其特征在于：所述的在線時延和識別精度自動分析方法是根據不同語音云服務產品的特征，提取數據包的應用層請求數據，識別第一個請求數據包和第一個回應數據包，根據第一個回應數據包的傳輸層編號和網絡層編號識別最后一個回應數據包，根據第一個請求數據包和最后一個回應數據包的時間戳獲得語音識別反饋時延，利用語音云API接口的輸出獲得識別結果，將語音庫中與發送語音樣本對應的關鍵字結合與識別結果對比，獲得識別精度。

4.根據權利要求3所述的一種車載語音云用戶體驗質量路測方法，其特征在于：根據數據包獲取的實際時延和識別精度，利用用戶體驗量化公式獲得用戶體驗的分值；基于GIS的車載語音云業務用戶體驗質量展示方法記錄業務發生的經緯度，并以冷色調表示高分值，以暖色調表示低分值，將分值顯示在地圖上。

5.根據權利要求1所述的一種車載語音云用戶體驗質量路測方法，其特征在于：包括如下具體步驟：

1)建立典型語音庫，包括用戶常用請求語音文件和與之對應的關鍵字；

2)針對不同典型場景建立測試腳本描述用戶的請求類型、語音長度和請求頻率；

3)根據測試腳本在車輛上自動發起業務，調用典型語音發送的被測的云服務器，同時記錄網絡數據包和API輸出識別結果；

4)根據語音云服務商特點在數據包應用層的體現定義初始請求包和最后反饋數據包；

5)根據數據包捕獲的時間戳計算反饋時延；

6)提取語音庫中和發送語音樣本對應的關鍵字文本，在識別反饋信息中匹配關鍵字，獲得識別精度；

7)根據反饋時延和識別精度計算用戶體驗分值；

8)根據業務發起位置顯示用戶體驗測試結果，以不同顏色圖標表示不同的用戶體驗等級。