[發明專利]基于虛擬現實場景的英文對話技能訓練方法與系統

在審

• 申請號: 202110661987.1
• 申請日: 2021-06-15
• 公開（公告）號: CN113342951A
• 公開（公告）日: 2021-09-03
• 發明（設計）人: 王鑫
• 申請（專利權）人: 上海松鼠課堂人工智能科技有限公司
• 主分類號: G06F16/332
• 分類號: G06F16/332;G06F16/33;G10L25/48
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.基于虛擬現實場景的英文對話技能訓練方法，其特征在于，其包括如下步驟：

步驟S1，采集學生進行實際英文朗誦的語音信息；從所述語音信息中提取學生對應的英文朗誦語音成分；分析所述英文朗誦語音成分，從而確定學生進行英文朗誦的實際英文對話語速和學生自身的英文詞匯量信息；

步驟S2，根據學生自身的英文詞匯量信息，從預設虛擬場景英文對話模擬練習素材庫中選取相匹配的英文對話練習文本；并根據所述實際英文對話語速，確定虛擬對象閱讀所述英文對話練習文本的語速和篇幅長度，從而實現學生與所述虛擬對象之間的虛擬場景英文對話模擬練習；

步驟S3，在虛擬場景英文對話模擬練習過程中，向學生反饋與學生的語速相一致的動態提示；并當學生語速異常時，向學生發送相應的預警語音消息。

2.如權利要求1所述的基于虛擬現實場景的英文對話技能訓練方法，其特征在于：

在所述步驟S1中，采集學生進行實際英文朗誦的語音信息；從所述語音信息中提取學生對應的英文朗誦語音成分；分析所述英文朗誦語音成分，從而確定學生進行英文朗誦的實際英文對話語速和學生自身的英文詞匯量信息具體包括：

步驟S101，采集學生進行實際英文朗誦的語音信息，并對所述語音信息進行卡爾曼濾波處理，從而去除語音信息中的背景噪聲；

步驟S102，根據學生自身的聲紋特征，從所述語音信息中提取與學生聲紋相一致的語音成分，以此作為學生對應的英文朗誦成分；并對所述英文朗誦語音成分進行語義識別，從而確定所述英文朗誦語音成分包含的英文單詞總量，以此作為學生自身的英文詞匯量信息；

步驟S103，利用下面公式(1)，分析所述英文朗誦語音成分，從而確定學生進行英文朗誦的實際英文對話語速，

在上述公式(1)中，V_a表示第a個學生的實際英文對話語速，t_a,i表示在第a個學生的英文朗誦語音成分中第a個學生說第i個單詞的初始時刻，t_a,i+1表示在第a個學生的英文朗誦語音成分中第a個學生說第i+1個單詞的初始時刻，并且第i個單詞與第i+1個單詞是相互鄰接的兩個單詞，n_a表示第a個學生的英文朗誦語音成分包含的單詞數量。

3.如權利要求2所述的基于虛擬現實場景的英文對話技能訓練方法，其特征在于：

在上述步驟S2中，根據學生自身的英文詞匯量信息，從預設虛擬場景英文對話模擬練習素材庫中選取相匹配的英文對話練習文本；并根據所述實際英文對話語速，確定虛擬對象閱讀所述英文對話練習文本的語速和篇幅長度，從而實現學生與所述虛擬對象之間的虛擬場景英文對話模擬練習具體包括：

步驟S201，根據學生自身的英文詞匯量信息，從預設虛擬場景英文對話模擬練習素材庫中選取包含最多學生自身掌握英文單詞的一個英文對話練習文本；

步驟S202，利用下面公式(2)，并結合所述實際英文對話語速，確定虛擬對象閱讀所述英文對話練習文本的語速，

在上述公式(2)中，表示與第a個學生進行虛擬場景英文對話模擬練習時虛擬對象的語速，m表示學生的數量，表示取V₁、V₂…V_a中的最小值，表示取V₁、V₂…V_a中的最大值，V_max表示虛擬對象的最大語速；

步驟S203，利用下面公式(3)，確定虛擬對象閱讀所述英文對話練習文本的篇幅長度L_a，

在上述公式(3)中，T表示虛擬對象閱讀所述英文對話練習文本的總持續時間；

并從選取的英文對話練習文本中截取與所述篇幅長度L_a相一致的文本片段；

再指示虛擬對象按照確定的語速閱讀截取的文本片段，從而實現學生與所述虛擬對象之間的虛擬場景英文對話模擬練習。