[發(fā)明專利]互動教學方法、裝置、存儲介質(zhì)及電子設(shè)備

在審

• 申請?zhí)枺?/td>: 202110450199.8
• 申請日: 2021-04-25
• 公開（公告）號: CN113140138A
• 公開（公告）日: 2021-07-20
• 發(fā)明（設(shè)計）人: 張建鑫;陳奕名;霍衛(wèi)濤;麻越;馬丁;王超
• 申請（專利權(quán)）人: 新東方教育科技集團有限公司
• 主分類號: G09B5/14
• 分類號: G09B5/14;G09B5/06;G10L15/06;G10L15/16;G10L15/22;G10L15/26;G10L25/24;G10L25/30
• 代理公司: 北京英創(chuàng)嘉友知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11447
• 代理人: 賀曉蕾

本公開涉及一種互動教學的方法、裝置、存儲介質(zhì)及電子設(shè)備，可以在接收到互動請求消息的情況下，獲取音頻采集裝置采集的教學互動音頻信息；所述教學互動音頻信息包括教師發(fā)出的音頻信息或者學生發(fā)出的音頻信息；將教學互動音頻信息進行語音分段處理，得到多個子音頻信息；根據(jù)多個子音頻信息通過預(yù)先訓(xùn)練得到的語音識別模型，得到所述教學互動音頻信息對應(yīng)的文本識別結(jié)果，所述語音識別模型的模型結(jié)構(gòu)去掉長短期記憶網(wǎng)絡(luò)LSTM層；根據(jù)所述文本識別結(jié)果生成教學素材查詢指令；根據(jù)所述教學素材查詢指令查詢與所述教學互動音頻信息匹配的目標素材；將目標素材添加至當前正在展示的教學課件中，以便展示根據(jù)教學互動音頻信息查找的所述目標素材。

技術(shù)領(lǐng)域

本公開涉及智能教學領(lǐng)域，具體地，涉及一種互動教學的方法、裝置、存儲介質(zhì)及電子設(shè)備。

背景技術(shù)

當下智慧教室越來越重要，其功能不僅僅局限于教室硬件設(shè)備的智能化(例如智能開關(guān)，智能投影儀等)，其更多地體現(xiàn)于課堂內(nèi)容的智能記錄與智能處理，在具體的教學形式上，表現(xiàn)為對教師、學生等教學活動主體間的良好互動支持，因此，做好教學互動環(huán)節(jié)，是掌握好教學環(huán)節(jié)的質(zhì)量，提高教學水平的關(guān)鍵。

目前的線下教學場景中，需要教師在每一節(jié)課前都準備大量課件、視頻、音頻等素材，引導(dǎo)學生思路，教學走向需要依靠教師不斷引導(dǎo)，而一旦學生的思維或反饋超出課堂本身的內(nèi)容準備時，教師也只能草草講解或延至下次課準備好之后再進行講解，無法及時響應(yīng)來自學生的“互動請求”。

發(fā)明內(nèi)容

本公開的目的是提供一種互動教學的方法、裝置、存儲介質(zhì)及電子設(shè)備。

第一方面，提供一種互動教學的方法，所述方法包括：

在接收到互動請求消息的情況下，獲取音頻采集裝置采集的教學互動音頻信息；所述教學互動音頻信息包括教師發(fā)出的音頻信息或者學生發(fā)出的音頻信息；將所述教學互動音頻信息進行語音分段處理，得到多個子音頻信息；根據(jù)多個所述子音頻信息通過預(yù)先訓(xùn)練得到的語音識別模型，得到所述教學互動音頻信息對應(yīng)的文本識別結(jié)果，所述語音識別模型的模型結(jié)構(gòu)去掉長短期記憶網(wǎng)絡(luò)LSTM層；根據(jù)所述文本識別結(jié)果生成教學素材查詢指令；根據(jù)所述教學素材查詢指令查詢與所述教學互動音頻信息匹配的目標素材；將所述目標素材添加至當前正在展示的教學課件中，以便展示根據(jù)所述教學互動音頻信息查找的所述目標素材。

可選地，所述文本識別結(jié)果包括由多個離散的文本字符組成的字符序列；所述根據(jù)多個所述子音頻信息通過預(yù)先訓(xùn)練得到的語音識別模型，得到所述教學互動音頻信息對應(yīng)的文本識別結(jié)果包括：針對多個所述子音頻信息中的每個子音頻信息，提取該子音頻信息對應(yīng)的梅爾倒譜系數(shù)MFCC特征；將每個所述子音頻信息分別對應(yīng)的所述MFCC特征依次輸入所述語音識別模型，得到所述字符序列。

可選地，所述根據(jù)所述文本識別結(jié)果生成教學素材查詢指令包括：根據(jù)所述字符序列進行模糊匹配，得到目標關(guān)鍵字；根據(jù)所述目標關(guān)鍵字生成所述教學素材查詢指令。

可選地，在所述根據(jù)所述教學素材查詢指令查詢與所述教學互動音頻信息匹配的目標素材之前，所述方法還包括：確定所述教學互動音頻信息對應(yīng)的聲源身份，所述聲源身份包括教師或者學生；根據(jù)所述聲源身份從預(yù)先搭建的檢索平臺中確定目標檢索平臺；所述根據(jù)所述教學素材查詢指令查詢與所述教學互動音頻信息匹配的目標素材包括：根據(jù)所述教學素材查詢指令從所述目標檢索平臺查詢所述目標素材。

可選地，所述確定所述教學互動音頻信息對應(yīng)的聲源身份包括：確定所述教學互動音頻信息對應(yīng)的目標采集方向；在所述目標采集方向為預(yù)設(shè)方向的情況下，確定所述教學互動音頻信息對應(yīng)的聲源身份為教師；在所述目標采集方向不是所述預(yù)設(shè)方向的情況下，確定所述教學互動音頻信息對應(yīng)的聲源身份為學生。

可選地，所述將所述目標素材添加至當前正在展示的教學課件中包括：將所述目標素材以圖層的方式添加至所述教學課件中的最頂層圖像幀中。