[發(fā)明專利]人機(jī)對話口語測評系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202011100849.8
• 申請日: 2019-08-23
• 公開（公告）號: CN112232083A
• 公開（公告）日: 2021-01-15
• 發(fā)明（設(shè)計）人: 王鑫;許昭慧
• 申請（專利權(quán)）人: 上海松鼠課堂人工智能科技有限公司
• 主分類號: G06F40/30
• 分類號: G06F40/30;G06F40/279;G06F40/211;G06F16/332;G06Q50/20;G09B7/02
• 代理公司: 上海中外企專利代理事務(wù)所(特殊普通合伙) 31387
• 代理人: 孫益青

1.一種人機(jī)對話口語測評系統(tǒng)，其特征在于包括：

語音識別模塊，所述語音識別模塊被配置為能夠識別學(xué)生用戶的語音輸入并轉(zhuǎn)換成文本；

意圖理解模塊，所述意圖理解模塊被配置為能夠結(jié)合用戶畫像和場景化信息對轉(zhuǎn)換后的文本進(jìn)行語義理解，以識別所述學(xué)生用戶在口語對話中的用戶意圖，所述用戶畫像包括用戶的口語水平維度，所述場景化信息包括當(dāng)前對話發(fā)生的虛擬場景；

對話管理模塊，所述對話管理模塊被配置為能夠基于所述意圖理解模塊的理解結(jié)果進(jìn)行相應(yīng)的語音回應(yīng)；

語言生成模塊，所述語言生成模塊被配置為能夠?qū)⑺鰧υ捁芾砟K產(chǎn)生的系統(tǒng)動作轉(zhuǎn)化為自然語言；以及

語言合成模塊，所述語言合成模塊被配置為能夠?qū)⒆匀徽Z言轉(zhuǎn)換成語音，并反饋給所述學(xué)生用戶；

其中，所述對話管理模塊包括對話狀態(tài)跟蹤模塊和對話策略學(xué)習(xí)模塊，當(dāng)所述學(xué)生用戶的回應(yīng)超出了所述意圖理解模塊能夠理解的范圍時，所述對話狀態(tài)跟蹤模塊根據(jù)當(dāng)前整個對話所處階段并融合對話過程的上下文信息表征當(dāng)前對話狀態(tài)，對話策略學(xué)習(xí)模塊根據(jù)所述當(dāng)前對話狀態(tài)采用通用回應(yīng)策略并通過虛擬人回應(yīng)通用語句來保持會話繼續(xù)進(jìn)行。

2.根據(jù)前述權(quán)利要求中任一項所述的系統(tǒng)，其特征在于：

所述意圖理解模塊進(jìn)一步被配置為能夠進(jìn)行槽位填充，其中，所述槽位是在對話過程中將所述用戶意圖轉(zhuǎn)化為明確的用戶指令所需要補(bǔ)全的信息。

3.根據(jù)前述權(quán)利要求中任一項所述的系統(tǒng)，其特征在于：

所述對話管理模塊還包括對話狀態(tài)跟蹤模塊，所述對話狀態(tài)跟蹤模塊被配置為能夠表示對話所處的階段，并融合對話過程的上下文信息。

4.根據(jù)前述權(quán)利要求中任一項所述的系統(tǒng)，其特征在于，還包括測評系統(tǒng)，所述測評系統(tǒng)包括：

情景對話語音和語義評測模塊，所述情景對話語音和語義評測模塊被配置為能夠根據(jù)語音和語義的標(biāo)準(zhǔn)內(nèi)容，對用戶語音轉(zhuǎn)換成的文本進(jìn)行相似度對比，并得到語音測評得分和語義測評得分。

5.根據(jù)前述權(quán)利要求中任一項所述的系統(tǒng)，其特征在于，所述測評系統(tǒng)還包括：

語法評測和錯誤檢查模塊，所述語法評測和錯誤檢查模塊被配置為能夠?qū)τ脩粽Z音轉(zhuǎn)換成的文本進(jìn)行語法檢查，并得到語法測評得分。

6.根據(jù)前述權(quán)利要求中任一項所述的系統(tǒng)，其特征在于，所述測評系統(tǒng)還包括：

易混音評測模塊，所述易混音評測模塊被配置為能夠?qū)τ脩粽Z音轉(zhuǎn)換成的文本標(biāo)示出易混音的錯誤，以進(jìn)行易混音的測評。

7.根據(jù)前述權(quán)利要求中任一項所述的系統(tǒng)，其特征在于：

所述對話管理模塊進(jìn)一步被配置為能夠根據(jù)所述測評系統(tǒng)的測評結(jié)果產(chǎn)生相應(yīng)的系統(tǒng)動作。

8.根據(jù)前述權(quán)利要求中任一項所述的系統(tǒng)，其特征在于：

當(dāng)用戶語音和標(biāo)準(zhǔn)語音音素的相似度越高，所述語音測評得分越高；以及

當(dāng)用戶表達(dá)的內(nèi)容和對比參考答案的相似度越高，所述語義測評得分越高。

9.根據(jù)前述權(quán)利要求中任一項所述的系統(tǒng)，其特征在于：

所述語法評測和錯誤檢查模塊進(jìn)一步被配置為能夠考察句子中的邏輯關(guān)系，所述邏輯關(guān)系包括以下一種或多種關(guān)系：主謂搭配、時態(tài)表達(dá)、句法結(jié)構(gòu)、單復(fù)數(shù)。

10.根據(jù)前述權(quán)利要求中任一項所述的系統(tǒng)，其特征在于：

所述會話式人機(jī)交互口語測評系統(tǒng)是基于單機(jī)和/或在線配置的計算機(jī)系統(tǒng)，以開展語言類內(nèi)容的測評。