[發(fā)明專利]一種口語訓(xùn)練自測(cè)自糾反饋系統(tǒng)及其應(yīng)用方法

在審

• 申請(qǐng)?zhí)枺?/td>: 202110477944.8
• 申請(qǐng)日: 2021-04-29
• 公開（公告）號(hào): CN113192369A
• 公開（公告）日: 2021-07-30
• 發(fā)明（設(shè)計(jì)）人: 文衛(wèi)平;姜鴻彥;藍(lán)天翔
• 申請(qǐng)（專利權(quán)）人: 佛山博智醫(yī)療科技有限公司
• 主分類號(hào): G09B5/06
• 分類號(hào): G09B5/06;G09B21/00
• 代理公司: 北京商專潤文專利代理事務(wù)所(普通合伙) 11317
• 代理人: 陳平

本發(fā)明公開了一種口語訓(xùn)練自測(cè)自糾反饋系統(tǒng)，包括聲音輸出裝置以及與聲音輸出裝置相配合的口語訓(xùn)練輔助裝置，口語訓(xùn)練輔助裝置包括弧形支架、主機(jī)、麥克風(fēng)、攝像頭和顯示器，主機(jī)安裝于弧形支架的底部，顯示器安裝于弧形支架的圓弧內(nèi)，麥克風(fēng)和攝像頭安裝于弧形支架且位于顯示器的外周，麥克風(fēng)和攝像頭均指向顯示器的正前方，麥克風(fēng)、攝像頭和顯示器均與主機(jī)電性連接，主機(jī)與聲音輸出裝置通信連接。還公開了上述系統(tǒng)的應(yīng)用方法，包括匹配連接、播放初始語音音頻、使用者口述、記錄反饋、比對(duì)處理等步驟。本系統(tǒng)不僅結(jié)構(gòu)簡單且可以記錄受訓(xùn)者的發(fā)音并糾錯(cuò)，這樣進(jìn)行聽障兒童聽覺口語訓(xùn)練就可減輕教師負(fù)擔(dān)，大大提高教學(xué)效率和教學(xué)質(zhì)量，事半功倍。

技術(shù)領(lǐng)域

本發(fā)明涉及聽力學(xué)領(lǐng)域，特別涉及一種口語訓(xùn)練自測(cè)自糾反饋系統(tǒng)及其應(yīng)用方法。

背景技術(shù)

聽障人士是由于聽力損失而導(dǎo)致聽覺和口語交流出現(xiàn)障礙的一類人群。聽障兒童屬于聽障人士的其中一個(gè)特殊群體。對(duì)于聽障兒童面對(duì)聽障除了需要驗(yàn)配助聽器之外，還需要進(jìn)行聽覺口語訓(xùn)練，以獲得聽覺感知能力和語言能力。

目前，聽障兒童的聽覺口語訓(xùn)練需要在聽障兒童教育中心接受教師與學(xué)生之間一對(duì)一的康復(fù)訓(xùn)練，以強(qiáng)化聽覺口語訓(xùn)練促進(jìn)兒童聽覺語言發(fā)育發(fā)展。由于教師數(shù)量有限不可能全天候一對(duì)一教授，同時(shí)，一對(duì)一訓(xùn)練時(shí)教師需要不斷糾正學(xué)生的發(fā)音，因此，目前的口語訓(xùn)練工作強(qiáng)度很大，事倍功半。

發(fā)明內(nèi)容

本發(fā)明的目的是為了提供一種口語訓(xùn)練自測(cè)自糾反饋系統(tǒng)及其應(yīng)用方法，該系統(tǒng)利用麥克風(fēng)接收語音，利用攝像頭捕捉面部表情和口型，讓學(xué)習(xí)語言的孩子獲得幫助，實(shí)時(shí)糾正口語發(fā)音，幫助聽障兒童矯正聽覺和口音，至少可以解決上述問題之一。

為實(shí)現(xiàn)上述目的，根據(jù)本發(fā)明的一個(gè)方面，提供了一種口語訓(xùn)練自測(cè)自糾反饋系統(tǒng)，包括聲音輸出裝置以及與聲音輸出裝置相配合的口語訓(xùn)練輔助裝置，口語訓(xùn)練輔助裝置包括弧形支架、主機(jī)、麥克風(fēng)、攝像頭和顯示器，主機(jī)安裝于弧形支架的底部，顯示器安裝于弧形支架的圓弧內(nèi)，麥克風(fēng)和攝像頭安裝于弧形支架且位于顯示器的外周，麥克風(fēng)和攝像頭均指向顯示器的正前方，麥克風(fēng)、攝像頭和顯示器均與主機(jī)電性連接，主機(jī)與聲音輸出裝置通信連接；

主機(jī)內(nèi)存儲(chǔ)有多組語音音頻以及這些語音音頻對(duì)應(yīng)的文字和口型圖像；

主機(jī)可將上述語音音頻的音頻信號(hào)傳輸至聲音輸出裝置；

顯示器可顯示上述發(fā)射的語音音頻對(duì)應(yīng)的文字；

聲音輸出裝置配置為使用者使用，使用者可根據(jù)聽到的聲音信號(hào)進(jìn)行口述；

攝像頭配置為捕捉使用者口述時(shí)的口型并反饋至主機(jī)；

麥克風(fēng)配置為拾取使用者口述時(shí)的語音信號(hào)并反饋至主機(jī)；

主機(jī)可根據(jù)攝像頭和麥克風(fēng)反饋的信息與初始的語音音頻和口型圖像進(jìn)行對(duì)比并進(jìn)行相應(yīng)的處理。

本發(fā)明提供了一種全新結(jié)構(gòu)的口語訓(xùn)練自測(cè)自糾反饋系統(tǒng)，該系統(tǒng)的工作原理為：接受訓(xùn)練的兒童坐在弧形支架前，面對(duì)著顯示器，佩戴好聲音輸出裝置，打開主機(jī)進(jìn)行語音音頻的播放，通過藍(lán)牙傳輸或者其他通信方式將該語音音頻傳入聲音輸出裝置中，受訓(xùn)練的兒童根據(jù)所聽到的聲音信號(hào)跟隨顯示器顯示的文字重復(fù)進(jìn)行口述朗讀，攝像頭捕捉受訓(xùn)練的兒童的口型，麥克風(fēng)拾取口述的語音，并反饋至主機(jī)與初始的口型圖像和語音音頻進(jìn)行對(duì)比并作出相應(yīng)的處理，如口型錯(cuò)誤或者口述的語音錯(cuò)誤則重復(fù)播放進(jìn)行糾錯(cuò)，如完全正確則結(jié)束或者切換下一語音音頻進(jìn)行訓(xùn)練。

本發(fā)明的口語訓(xùn)練自測(cè)自糾反饋系統(tǒng)不僅結(jié)構(gòu)簡單且可以記錄受訓(xùn)者的發(fā)音并糾錯(cuò)，然后重復(fù)播放，讓受訓(xùn)者模仿朗讀，這樣進(jìn)行聽障兒童聽覺口語訓(xùn)練就可以減輕教師一對(duì)一的負(fù)擔(dān)，一個(gè)教師可同時(shí)教授多個(gè)學(xué)生，大大提高教學(xué)效率和教學(xué)質(zhì)量，事半功倍。