[發(fā)明專利]聾啞人無(wú)障礙交流學(xué)習(xí)輔助系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 202110253701.6
• 申請(qǐng)日: 2021-03-09
• 公開(kāi)（公告）號(hào): CN112991886B
• 公開(kāi)（公告）日: 2023-05-09
• 發(fā)明（設(shè)計(jì)）人: 孟力
• 申請(qǐng)（專利權(quán)）人: 湖北工業(yè)大學(xué)
• 主分類號(hào): G09B21/00
• 分類號(hào): G09B21/00;G09B5/02
• 代理公司: 天津鉑茂專利代理事務(wù)所(普通合伙) 12241
• 代理人: 陳曉蕾

本發(fā)明公開(kāi)了一種聾啞人無(wú)障礙交流學(xué)習(xí)輔助系統(tǒng)，包括主機(jī)、面部模擬機(jī)器人、面部捕捉頭盔和調(diào)控面板，所述面部捕捉頭盔通過(guò)信號(hào)線和主機(jī)、面部模擬機(jī)器人之間通過(guò)電性連接，所述調(diào)控面板的信號(hào)端和主機(jī)之間通過(guò)電性連接。本發(fā)明將聾啞人的語(yǔ)言學(xué)習(xí)系統(tǒng)化，其次將面部表情捕捉技術(shù)、仿真模擬和語(yǔ)言學(xué)習(xí)相結(jié)合，采集的數(shù)據(jù)在仿真頭上較為精確的重現(xiàn)，其次打破了原有聾啞人的學(xué)習(xí)方式和交流方式使其能夠和正常人實(shí)現(xiàn)無(wú)障礙交流。

技術(shù)領(lǐng)域

本發(fā)明涉及聾啞人學(xué)習(xí)輔助系統(tǒng)技術(shù)領(lǐng)域，尤其涉及一種聾啞人無(wú)障礙交流學(xué)習(xí)輔助系統(tǒng)。

背景技術(shù)

絕大多數(shù)聾啞人是因?yàn)槊@導(dǎo)致的啞，所以他們是能夠像正常人一樣發(fā)音的，而且他們的視覺(jué)觸覺(jué)是完好的，這就意味著通過(guò)視覺(jué)，觸覺(jué)對(duì)其進(jìn)行教學(xué)是可行的，具有科學(xué)性的。

中國(guó)有兩千多萬(wàn)的聾啞人，其中絕大多數(shù)是因?yàn)槊@而導(dǎo)致了啞。而聾和啞令他們難以和正常人溝通交流，從而對(duì)他們的生活產(chǎn)生了巨大的局限性。而本發(fā)明的目的就是為了讓他們能夠和正常人實(shí)現(xiàn)無(wú)障礙交流。

發(fā)明內(nèi)容

基于背景技術(shù)存在的技術(shù)問(wèn)題，本發(fā)明提出了一種聾啞人無(wú)障礙交流學(xué)習(xí)輔助系統(tǒng)。

本發(fā)明提出的一種聾啞人無(wú)障礙交流學(xué)習(xí)輔助系統(tǒng)，包括主機(jī)、面部模擬機(jī)器人、面部捕捉頭盔和調(diào)控面板，所述面部捕捉頭盔通過(guò)信號(hào)線和主機(jī)、面部模擬機(jī)器人之間通過(guò)電性連接，所述調(diào)控面板的信號(hào)端和主機(jī)之間通過(guò)電性連接。

作為本發(fā)明進(jìn)一步的方案，所述面部捕捉頭盔包括頭盔、金屬軟管、面部捕捉攝像頭和軟管連接座，所述軟管連接座的外壁對(duì)稱設(shè)在頭盔的兩側(cè)外壁上，且金屬軟管的一端連接在軟管連接座的外壁上，所述金屬軟管的另一端和面部捕捉攝像頭相連接。

作為本發(fā)明進(jìn)一步的方案，所述面部模擬機(jī)器人包括機(jī)體和控制器，且機(jī)體的外部分布有眉形模擬區(qū)、眼部模擬區(qū)、面部肌肉模擬區(qū)、唇形模擬區(qū)和舌頭模擬區(qū)，所述眉形模擬區(qū)、眼部模擬區(qū)、面部肌肉模擬區(qū)、唇形模擬區(qū)和舌頭模擬區(qū)的信號(hào)端與相應(yīng)獨(dú)立的控制器相連接。

作為本發(fā)明進(jìn)一步的方案，所述調(diào)控面板的外壁設(shè)有I-X羅馬數(shù)字編號(hào)的模擬區(qū)組合鍵，且模擬區(qū)組合鍵對(duì)應(yīng)不同的數(shù)字編號(hào)-的模擬動(dòng)作區(qū)。

作為本發(fā)明進(jìn)一步的方案，所述面部捕捉攝像頭捕捉對(duì)應(yīng)的模擬區(qū)位置采相，且面部捕捉攝像頭連接至主機(jī)，利用算法輸出成對(duì)應(yīng)的編號(hào)組，對(duì)應(yīng)模擬區(qū)組合鍵和組合鍵滑動(dòng)的模擬動(dòng)作區(qū)組合。

本發(fā)明中的有益效果有以下幾點(diǎn)：

1.本系統(tǒng)采用是計(jì)算機(jī)設(shè)備和機(jī)械設(shè)備聯(lián)用，從視覺(jué)和觸覺(jué)對(duì)聾啞人進(jìn)行教學(xué)。首先以面部表情捕捉技術(shù)和仿真模擬，正常人說(shuō)話時(shí)的面部表情，唇形，口腔內(nèi)部情形的數(shù)據(jù)進(jìn)行收集和測(cè)量，再將這些數(shù)據(jù)再計(jì)算機(jī)上以動(dòng)畫形式展現(xiàn)，聾啞人可以通過(guò)觀察唇形，首先學(xué)會(huì)唇語(yǔ)，通過(guò)面部表情感受對(duì)方情緒的變化；

2.本系統(tǒng)將數(shù)據(jù)在仿真頭上實(shí)時(shí)傳動(dòng)，聾啞人可以觸摸仿真頭口腔內(nèi)部情形，進(jìn)行模仿發(fā)音，對(duì)于聾啞人的模仿發(fā)音計(jì)算機(jī)會(huì)進(jìn)行收集和分析，比對(duì)正常人的發(fā)音，進(jìn)行評(píng)判，結(jié)果反映在電腦上，從而令其反復(fù)訓(xùn)練，直到達(dá)到發(fā)音正常的水平；

3.本系統(tǒng)中利用調(diào)控面板中組合鍵和組合鍵的調(diào)節(jié)檔位形成不同組合的模擬表情，進(jìn)而實(shí)現(xiàn)了一個(gè)模擬動(dòng)作進(jìn)行后，其眉形、眼部、臉部肌肉、唇形和舌部動(dòng)作變化，形成一組編號(hào)，代替其不同表情，精度高，編碼可代表的表情更加豐富，使用不同階段的學(xué)習(xí)。

附圖說(shuō)明

圖1為本發(fā)明提出的一種聾啞人無(wú)障礙交流學(xué)習(xí)輔助系統(tǒng)的中系統(tǒng)結(jié)構(gòu)示意圖；

圖2為本發(fā)明提出的一種聾啞人無(wú)障礙交流學(xué)習(xí)輔助系統(tǒng)的中面部模擬機(jī)器人結(jié)構(gòu)示意圖；

圖3為本發(fā)明提出的一種聾啞人無(wú)障礙交流學(xué)習(xí)輔助系統(tǒng)的中輔助學(xué)習(xí)流程圖。