[發明專利]會話式人機交互口語測評系統

有效

• 申請號: 201910781649.4
• 申請日: 2019-08-23
• 公開（公告）號: CN110489756B
• 公開（公告）日: 2020-10-27
• 發明（設計）人: 王鑫;許昭慧
• 申請（專利權）人: 上海松鼠課堂人工智能科技有限公司
• 主分類號: G06F40/30
• 分類號: G06F40/30;G06F40/211;G06F40/279;G06F16/332;G06Q50/20;G09B7/02
• 代理公司: 上海中外企專利代理事務所(特殊普通合伙) 31387
• 代理人: 孫益青

1.一種會話式人機交互口語測評系統，其特征在于包括對話系統和測評系統，所述對話系統包括：

語音識別模塊，所述語音識別模塊被配置為能夠識別學生用戶的語音輸入并轉換成文本；

意圖理解模塊，所述意圖理解模塊被配置為能夠結合用戶畫像和場景化信息對轉換后的文本進行語義理解，以識別所述學生用戶在口語對話中的用戶意圖，所述用戶畫像包括用戶的口語水平維度，所述場景化信息包括當前對話發生的虛擬場景；

對話管理模塊，所述對話管理模塊被配置為能夠基于所述意圖理解模塊的理解結果進行相應的語音回應；

語言生成模塊，所述語言生成模塊被配置為能夠將所述對話管理模塊產生的系統動作轉化為自然語言；以及

語言合成模塊，所述語言合成模塊被配置為能夠將自然語言轉換成語音，并反饋給所述學生用戶；

所述測評系統被配置為能夠對轉換后的文本進行多維度的測評，并根據測評結果更新所述用戶畫像；以及

所述對話管理模塊進一步被配置為能夠基于所述測評系統的測評結果和所述意圖理解模塊的理解結果，結合測評目標和對話策略而使得虛擬人對所述學生用戶進行相應的語音回應以保持會話繼續進行；

其中，所述對話管理模塊包括對話狀態跟蹤模塊和對話策略學習模塊，當所述學生用戶的回應超出了所述意圖理解模塊能夠理解的范圍時，所述對話狀態跟蹤模塊根據當前整個對話所處階段并融合對話過程的上下文信息表征當前對話狀態，對話策略學習模塊根據所述當前對話狀態采用通用回應策略并通過虛擬人回應通用語句來保持會話繼續進行。

2.根據權利要求1所述的會話式人機交互口語測評系統，其特征在于：

所述意圖理解模塊進一步被配置為能夠進行槽位填充，通過用戶表述提取槽位以理解用戶語音并決定下一個對話的內容，其中，所述槽位是在對話過程中將所述用戶意圖轉化為明確的用戶指令所需要補全的信息。

3.根據權利要求1所述的會話式人機交互口語測評系統，其特征在于：

所述對話管理模塊還包括對話狀態跟蹤模塊，所述對話狀態跟蹤模塊被配置為能夠表示對話所處的階段，并融合對話過程的上下文信息。

4.根據權利要求1所述的會話式人機交互口語測評系統，其特征在于：

所述對話管理模塊還包括對話策略學習模塊，所述對話策略學習模塊被配置為能夠根據當前的對話狀態，生成系統的下一步操作。

5.根據權利要求1所述的會話式人機交互口語測評系統，其特征在于還包括測評系統，所述測評系統包括：

情景對話語音和語義評測模塊，所述情景對話語音和語義評測模塊被配置為能夠根據語音和語義的標準內容，對用戶語音轉換成的文本進行相似度對比，并得到語音測評得分和語義測評得分；

語法評測和錯誤檢查模塊，所述語法評測和錯誤檢查模塊被配置為能夠對用戶語音轉換成的文本進行語法檢查，并得到語法測評得分；以及

易混音評測模塊，所述易混音評測模塊被配置為能夠對用戶語音轉換成的文本標示出易混音的錯誤，以進行易混音的測評。

6.根據權利要求5所述的會話式人機交互口語測評系統，其特征在于：

所述對話管理模塊進一步被配置為能夠根據所述測評系統的測評結果產生相應的系統動作。

7.根據權利要求5所述的會話式人機交互口語測評系統，其特征在于：

當用戶語音和標準語音音素的相似度越高，所述語音測評得分越高；以及

當用戶表達的內容和對比參考答案的相似度越高，所述語義測評得分越高。

8.根據權利要求5所述的會話式人機交互口語測評系統，其特征在于：

所述語法評測和錯誤檢查模塊進一步被配置為能夠考察句子中的邏輯關系，所述邏輯關系包括以下一種或多種關系：主謂搭配、時態表達、句法結構、單復數。

9.根據前述權利要求中任一項所述的會話式人機交互口語測評系統，其特征在于：

所述會話式人機交互口語測評系統是基于單機和/或在線配置的計算機系統，以開展語言類內容的測評。