[發明專利]語音交互設備評級方法、系統、計算機設備和存儲介質

有效

• 申請號: 201810847969.0
• 申請日: 2018-07-27
• 公開（公告）號: CN108986786B
• 公開（公告）日: 2020-12-08
• 發明（設計）人: 徐鵬飛;徐華偉;黃林軼;黃登甲;劉嘉祁;陳玉明;彭琦;劉群興
• 申請（專利權）人: 中國電子產品可靠性與環境試驗研究所（（工業和信息化部電子第五研究所）（中國賽寶實驗室））
• 主分類號: G10L15/01
• 分類號: G10L15/01
• 代理公司: 廣州華進聯合專利商標代理有限公司 44224
• 代理人: 陳金普

本申請涉及一種語音交互設備評級方法、系統、計算機設備和存儲介質。所述方法包括：獲取待測語音交互設備的設備功能信息；根據待測語音交互設備的設備功能信息在語音交互測試題庫中獲取標準測試題集；根據標準測試題集對待測語音交互設備進行評測，并獲取評測值，根據評測值獲取待測語音交互設備的評測等級。采用本方法能夠根據設備功能信息獲取標準測試題集，通過標準測試題集可以對待測語音交互設備的設備功能進行評測，其中，語音交互設備的設備功能信息易于被識別，也容易獲取，便于根據設備功能對語音交互設備進行評測，可以大大降低語音交互設備評級方法的成本，同時提高效率。

技術領域

本申請涉及語音交互評測技術領域，特別是涉及一種語音交互設備評級方法、語音交互設備評級系統、計算機設備和存儲介質。

背景技術

在大數據、移動互聯網、云計算以及其他技術的推動下，全球的語音識別產業已經步入應用快速增長期。語音識別技術與其他自然語言處理技術，如機器翻譯及語音合成技術相結合，可以構建出更加復雜的產品。目前，市場上已經出現了智能音箱、智能電視、服務機器人等多種類型的語音交互設備。這些語音交互設備可以根據用戶的語音指令和談話內容實現陪伴聊天、文字錄入、信息查詢、身份識別、設備控制等功能，大大提高了日常工作效率。

不同語音交互設備所采用的算法不同，在傳統方式下語音交互設備評級方法是按照算法的指標體系對語音交互設備進行評價的，語音交互算法的指標體系繁多且復雜，語音交互設備的評級方法成本高，且評級方法所獲得的評價結果的可讀性差，使得傳統方式下語音交互設備評級方法的效率低。

發明內容

基于此，有必要針對上述傳統方式下語音交互設備評級方法的效率低技術問題，提供一種語音交互設備評級方法、系統、計算機設備和存儲介質。

一種語音交互設備評級方法，包括以下步驟：

獲取待測語音交互設備的設備功能信息；

根據待測語音交互設備的設備功能信息在語音交互測試題庫中獲取標準測試題集；

根據標準測試題集對待測語音交互設備進行評測，并獲取評測值，根據評測值獲取待測語音交互設備的評測等級。

在一個實施例中，根據待測語音交互設備的設備功能信息在語音交互測試題庫中獲取標準測試題集的步驟，包括以下步驟：

根據待測語音交互設備的設備功能信息在語音交互測試題庫中獲取有效測試題集，其中，有效測試題集包括用于對待測語音交互設備進行測試并獲取測試反饋信息的有效測試題；

在有效測試題集選取第一預設數量的有效測試題，并將第一預設數量的有效測試題組成標準測試題集。

在一個實施例中，在有效測試題集選取第一預設數量的有效測試題，并將第一預設數量的有效測試題組成標準測試題集的步驟，包括以下步驟：

獲取有效測試題集的各個有效測試題的特征值；

按照各有效測試題的特征值對所有有效測試題進行分類，并生成多個聚類，其中，聚類包括特征值為同類的有效測試題；

在當前聚類中選取當前聚類對應的第二預設數量的有效測試題，并將第二預設數量的有效測試題作為當前聚類的聚類測試題集；

獲取各個聚類的聚類測試題集，并將所有聚類的聚類測試題集組成標準測試題集，其中，所有聚類對應的第二預設數量的總和等于第一預設數量。

在一個實施例中，在當前聚類中選取第二預設數量的有效測試題，并將第二預設數量的有效測試題作為當前聚類的聚類測試題集的步驟，包括以下步驟：

獲取當前聚類中各個有效測試題的相似度因子；

在當前聚類中選取第二預設數量的有效測試題，并計算第二預設數量的有效測試題的相似度因子的和值；