[發明專利]一種人機交互式語言學習系統和方法

在審

• 申請號: 201310386003.9
• 申請日: 2013-08-30
• 公開（公告）號: CN103413550A
• 公開（公告）日: 2013-11-27
• 發明（設計）人: 張國祥;羅霄
• 申請（專利權）人: 蘇州跨界軟件科技有限公司
• 主分類號: G10L15/02
• 分類號: G10L15/02;G09B5/04
• 代理公司: 南京縱橫知識產權代理有限公司 32224
• 代理人: 董建林

1.一種人機交互式語言學習系統，其包括若干個通過服務器通信連接的帶有顯示界面的用戶終端，其特征在于：所述用戶終端包括

用戶注冊模塊，用于根據用戶的基本信息注冊獲得用戶名；

課程發布模塊，用于發布者采集并發布基于其本國母語的標準語音課程；

數據分析模塊，用于分析所述發布者發布的所述標準語音課程，獲得至少帶有音素特征和韻律特征的標準特征參數；

上傳模塊，用于發布者將標準語音課程和標準特征參數一起打包上傳至服務器；

下載模塊，用于學習者根據自己的需要從服務器中打包下載目標語言國家的人上傳的標準語音課程；

語音采集模塊，用于采集學習者的測試語音信息，獲得測試語音數據；

數據存儲及檢測模塊，用于記錄所述語音采集模塊采集的測試語音數據，并對其進行分析，從中提取至少帶有音素特征和韻律特征的特征參數，將所述特征參數與所述標準特征參數進行識別比對，獲得能代表所述學習者發音錯誤的特征數據；

語音質量評分模塊，用于對所述特征數據做進一步的判斷，分析出錯誤級別，并結合錯誤級別對所述學習者的發音狀況給予總體評分，將總體評分結果反饋給所述用戶終端的顯示界面；

課程評價模塊，用于所述學習者查看自己的總體評分，并給予上傳標準語音課程的所述發布者評價，所述評價包括贊許和反對。

2.根據權利要求1所述的一種人機交互式語言學習系統，其特征在于：所述數據存儲及檢測模塊包括：

特征提取模塊，用于從所述測試語音數據中提取帶有音素特征和韻律特征的特征參數；

語音識別模塊，用于基于神經網絡模型對所述特征參數和標準特征參數進行識別比對，獲得音素錯誤值和韻律錯誤值。

3.根據權利要求2所述的一種人機交互式語言學習系統，其特征在于：所述語音質量評分模塊包括：

音素發音評分模塊，用于對所述音素錯誤值做進一步的判斷，分析出音素錯誤等級，給出音素質量總體評分；

韻律發音評分模塊，用于對所述韻律錯誤值做進一步的判斷，分析出音素錯誤等級，給出韻律質量總體評分。

4.根據權利要求2所述的一種人機交互式語言學習系統，其特征在于：所述音素特征包括元音音素特征和輔音音素特征，所述韻律特征包括韻律總體特征、流利程度以及語調特征。

5.根據權利要求1所述的一種人機交互式語言學習系統，其特征在于：所述用戶終端還包括升級更新模塊，用于給學習標準語音課程的所述學習者和獲得贊許的所述發布者升級更新，升級更新后可以獲得學習更多發布者的所述標準語音課程的權限和獲得發布更多所述標準語音課程的權限。

6.根據權利要求1所述的一種人機交互式語言學習系統，其特征在于：所述用戶終端還包括貨幣支付模塊，用于通過第三方支付平臺支付購買所述發布者發布的語音課程。

7.根據權利要求1所述的一種人機交互式語言學習系統，其特征在于：所述用戶終端為手機、IPAD、電腦的其中之一。

8.一種運用在如權利要求1-6任意一項所述的學習系統中的人機交互式語言學習方法，其特征在于包括以下步驟：

S1課程發布者在線采集或者預先錄制基于其本國母語的標準語音課程；

S2系統從課程發布者發布的標準語音課程中提取至少帶有音素特征和韻律特征的標準特征參數；

S3課程發布者將標準語音課程和標準特征參數一起打包上傳至服務器；

S4課程學習者根據自己的需要從服務器中打包下載目標語言國家的人上傳的帶有標準語音課程和標準特征參數的壓縮包，作為學習跟讀的樣本；

S5用戶終端采集按程序要求進行發音的測試語音數據；

S6系統從測試語音數據中提取至少帶有音素特征和韻律特征的特征參數；

S7系統對特征參數和標準特征參數進行識別比對，獲得能代表學習者發音錯誤的特征數據，給出總體評分，并將發音錯誤和總體評分反饋給學習者；

S8學習者主動查看自己的發音錯誤之處和總體評分，滿意，則此次學習過程結束，學習者給課程發布者進行評價，不滿意，則返回S5；

S9學習過程結束后學習者可以選擇是否將自己學習跟讀的語音上傳至服務器，不愿意，則退出系統。