[發(fā)明專利]一種交互式多媒體英文教學(xué)裝置及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110048200.4
• 申請(qǐng)日: 2021-01-14
• 公開(kāi)（公告）號(hào): CN112700553A
• 公開(kāi)（公告）日: 2021-04-23
• 發(fā)明（設(shè)計(jì)）人: 周莉
• 申請(qǐng)（專利權(quán)）人: 江西師范大學(xué)
• 主分類號(hào): G06T19/00
• 分類號(hào): G06T19/00;G06T15/00;G06T7/11;G06T7/13;G06K9/00;G06N3/08;G06N3/04
• 代理公司: 北京商專永信知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11400
• 代理人: 鄧婷婷

本發(fā)明提供一種交互式多媒體英文教學(xué)裝置，交互式多媒體英文教學(xué)裝置包括：一個(gè)本地端。本地端，其包括：一個(gè)AR/MR眼鏡、一個(gè)數(shù)據(jù)接收器和一個(gè)數(shù)據(jù)處理器。本發(fā)明中提供的交互式多媒體英文教學(xué)裝置通過(guò)三維成像方式，可以使使用者在三維場(chǎng)景中對(duì)物體的英文認(rèn)知，提高了英文數(shù)據(jù)顯示的多樣性，可同時(shí)結(jié)合場(chǎng)景獲取英文數(shù)據(jù)及英文音頻數(shù)據(jù)。提高了英文數(shù)據(jù)及相關(guān)圖像呈現(xiàn)的多樣性且同時(shí)顯示數(shù)據(jù)量小，提供了顯示數(shù)據(jù)的運(yùn)行穩(wěn)定性。同時(shí)本發(fā)明還提供了一種交互式多媒體英文教學(xué)系統(tǒng)。

技術(shù)領(lǐng)域

本發(fā)明能應(yīng)用于英文或其他教學(xué)領(lǐng)域中。本發(fā)明具體涉及交互式多媒體英文教學(xué)裝置及系統(tǒng)。

背景技術(shù)

在現(xiàn)有的現(xiàn)場(chǎng)教學(xué)中，多采用PPT播放課件的方式教學(xué)，其學(xué)習(xí)者隨著老師的講解以及互動(dòng)學(xué)習(xí)。但在長(zhǎng)期的英語(yǔ)教學(xué)實(shí)踐中發(fā)現(xiàn)，上述現(xiàn)場(chǎng)學(xué)習(xí)方式，多是教師在營(yíng)造一種語(yǔ)言教學(xué)場(chǎng)景，其學(xué)習(xí)者的沉浸式體驗(yàn)較差。特別是在遠(yuǎn)程教學(xué)中，由于教師在遠(yuǎn)程教學(xué)中多以講述為主，學(xué)習(xí)者的體驗(yàn)性會(huì)更差于現(xiàn)場(chǎng)教學(xué)。由此可知，現(xiàn)有的英語(yǔ)教學(xué)方式多為靜態(tài)方式，學(xué)習(xí)者的沉浸式體驗(yàn)差。

發(fā)明內(nèi)容

本發(fā)明的目的是提供一種交互式多媒體英文教學(xué)裝置，其通過(guò)三維成像方式，可以使使用者在三維場(chǎng)景中對(duì)物體的英文認(rèn)知，提高了英文數(shù)據(jù)顯示的多樣性，可同時(shí)結(jié)合場(chǎng)景獲取英文數(shù)據(jù)及英文音頻數(shù)據(jù)。提高了英文數(shù)據(jù)及相關(guān)圖像呈現(xiàn)的多樣性且同時(shí)顯示數(shù)據(jù)量小，提供了顯示數(shù)據(jù)的運(yùn)行穩(wěn)定性。

本發(fā)明的目的是提供一種交互式多媒體英文教學(xué)系統(tǒng)，其通過(guò)教學(xué)端和本地端，實(shí)現(xiàn)英文三維教學(xué)圖像的推送。

本發(fā)明一方面提供了交互式多媒體英文教學(xué)裝置，交互式多媒體英文教學(xué)裝置包括：一個(gè)本地端。

本地端，其包括：一個(gè)AR/MR眼鏡、一個(gè)數(shù)據(jù)接收器和一個(gè)數(shù)據(jù)處理器。

AR/MR眼鏡能夠獲取采集包括多個(gè)物體圖像的英文三維教學(xué)圖像。AR/MR眼鏡具有一個(gè)圖像輸出端。

數(shù)據(jù)接收器能夠從AR/MR眼鏡的圖像輸出端接收英文三維教學(xué)圖像。數(shù)據(jù)接收器具有一個(gè)數(shù)據(jù)發(fā)送端。數(shù)據(jù)發(fā)送端能夠?qū)⒂⑽娜S教學(xué)圖像向外發(fā)送。

數(shù)據(jù)處理器連接數(shù)據(jù)發(fā)送端且能夠接收英文三維教學(xué)圖像。數(shù)據(jù)處理器圖像識(shí)別英文三維教學(xué)圖像中各物體的物體邊界。根據(jù)物體邊界將英文三維教學(xué)圖像劃分為多個(gè)物體區(qū)域圖像。每個(gè)物體區(qū)域均具有一個(gè)物體中心位置信息。

數(shù)據(jù)處理器通過(guò)一個(gè)深度卷積神經(jīng)網(wǎng)絡(luò)識(shí)別物體區(qū)域圖像，獲取物體區(qū)域圖像中多個(gè)物體的名稱信息。數(shù)據(jù)處理器根據(jù)多個(gè)物體的名稱信息獲取英文名稱信息。數(shù)據(jù)處理器根據(jù)物體中心位置信息在英文三維教學(xué)圖像中生成其對(duì)應(yīng)的物體英文名稱信息。數(shù)據(jù)處理器將物體中心位置信息及與其對(duì)應(yīng)的物體英文名稱信息發(fā)送到AR/MR眼鏡。

AR/MR眼鏡在物體中心位置信息對(duì)應(yīng)的位置上加載顯示物體英文名稱信息。

在本發(fā)明交互式多媒體英文教學(xué)裝置的另一種實(shí)施方式中，數(shù)據(jù)處理器通過(guò)英文名稱信息獲取于其對(duì)應(yīng)的英文音頻信息。數(shù)據(jù)處理器將英文音頻信息發(fā)送到AR/MR眼鏡。

AR/MR眼鏡在物體中心位置信息對(duì)應(yīng)的位置上依次加載顯示物體英文名稱信息。在依次加載顯示物體英文名稱信息的同時(shí)播放物體英文名稱信息相應(yīng)的英文音頻信息。

在本發(fā)明交互式多媒體英文教學(xué)裝置的另一種實(shí)施方式中，交互式多媒體英文教學(xué)裝置還包括：一個(gè)教學(xué)端。

教學(xué)端通過(guò)遠(yuǎn)程無(wú)線方式與本地端連接且能夠向本地端下發(fā)英文三維教學(xué)圖像。本地端還包括：一個(gè)無(wú)線數(shù)據(jù)收發(fā)器和一個(gè)顯示器件。

無(wú)線數(shù)據(jù)收發(fā)器能夠從教學(xué)端接收英文三維教學(xué)圖像且能夠?qū)⒂⑽娜S教學(xué)圖像發(fā)送到數(shù)據(jù)處理器。數(shù)據(jù)處理器能夠從其數(shù)據(jù)輸出端發(fā)送英文三維教學(xué)圖像。和

顯示器件連接數(shù)據(jù)處理器的數(shù)據(jù)輸出端且能夠接收并顯示英文三維教學(xué)圖像中的二維畫面。