[發明專利]語音合成質量測試方法及裝置

有效

• 申請號: 201811480007.2
• 申請日: 2018-12-05
• 公開（公告）號: CN109473121B
• 公開（公告）日: 2021-06-01
• 發明（設計）人: 杜斌;初敏
• 申請（專利權）人: 思必馳科技股份有限公司
• 主分類號: G10L25/60
• 分類號: G10L25/60;G10L13/02
• 代理公司: 北京商專永信知識產權代理事務所(普通合伙) 11400
• 代理人: 方挺;車江華

1.一種語音合成質量測試方法，包括：

S10、預先基于語音合成系統生成測試用例集；

S20、從所述測試用例集中隨機選擇設定數量的測試用例；

S30、對當前設定數量的測試用例進行測試，并確定當前局部測試用例通過率；

S40、根據所述當前局部測試用例通過率確定對應于所述測試用例集的置信度區間；當目標通過率小于所述置信度區間的下限值時，判定所述語音合成系統的語音合成質量達標；當目標通過率大于所述置信度區間的上限值時，判定所述語音合成系統的語音合成質量不達標；當目標通過率落入所述置信度區間時，判定無法確定所述語音合成系統的語音合成質量的達標情況；其中，所述目標通過率是為所述測試用例集指定的通過率；

所述置信度區間為：(p₁，p₂)，其中，

其中，n是用例的數目，是用例的通過率，其中α為非置信水平在正態分布內的覆蓋面積，Z_α/2即為對應的標準分數；

S50、當能夠確定所述語音合成系統的語音合成質量的達標情況時，則結束測試；

S60、當不能夠確定所述語音合成系統的語音合成質量的達標情況時，則再次從所述測試用例集中隨機選擇所述設定數量的測試用例并跳轉至步驟S30。

2.根據權利要求1所述的方法，其中，對當前設定數量的測試用例進行測試，并確定當前局部測試用例通過率包括：

將當前設定數量的測試用例分配給聽測人員進行測試評分；

根據當前已經測試過的所有測試用例的評分結果確定所述當前局部測試用例通過率。

3.根據權利要求1所述的方法，其中，所述當能夠確定所述語音合成系統的語音合成質量的達標情況時，結束測試包括：

當判定所述語音合成系統的語音合成質量達標或者判定所述語音合成系統的語音合成質量不達標時，結束測試。

4.一種語音合成質量測試裝置，包括：

測試用例集生成模塊，用于預先基于語音合成系統生成測試用例集；

測試用例選擇模塊，用于從所述測試用例集中隨機選擇設定數量的測試用例；

通過率確定模塊，用于對當前設定數量的測試用例進行測試，并確定當前局部測試用例通過率；

判定模塊，用于根據所述當前局部測試用例通過率確定對應于所述測試用例集的置信度區間；當目標通過率小于所述置信度區間的下限值時，判定所述語音合成系統的語音合成質量達標；當目標通過率大于所述置信度區間的上限值時，判定所述語音合成系統的語音合成質量不達標；當目標通過率落入所述置信度區間時，判定無法確定所述語音合成系統的語音合成質量的達標情況；其中，所述目標通過率是為所述測試用例集指定的通過率；

所述置信度區間為：(p₁，p₂)，其中，

其中，n是用例的數目，是用例的通過率，其中α為非置信水平在正態分布內的覆蓋面積，Z_α/2即為對應的標準分數；

結束測試模塊，用于當能夠確定所述語音合成系統的語音合成質量的達標情況時，結束測試；

循環測試模塊，用于當不能夠確定所述語音合成系統的語音合成質量的達標情況時，再次從所述測試用例集中隨機選擇所述設定數量的測試用例并調用所述通過率確定模塊。

5.根據權利要求4所述的裝置，其中，所述通過率確定模塊包括：

用例分配單元，用于將當前設定數量的測試用例分配給聽測人員進行測試評分；

通過率確定單元，用于根據當前已經測試過的所有測試用例的評分結果確定所述當前局部測試用例通過率。

6.根據權利要求4所述的裝置，其中，所述當能夠確定所述語音合成系統的語音合成質量的達標情況時，結束測試包括：

當判定所述語音合成系統的語音合成質量達標或者判定所述語音合成系統的語音合成質量不達標時，結束測試。