[發(fā)明專利]基于人工智能技術(shù)的教師課堂教學(xué)過(guò)程分析方法和系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 201710179527.9
• 申請(qǐng)日: 2017-03-23
• 公開(kāi)（公告）號(hào): CN107918821A
• 公開(kāi)（公告）日: 2018-04-17
• 發(fā)明（設(shè)計(jì)）人: 李昊;鄭凱;林南暉;黃葉敏
• 申請(qǐng)（專利權(quán)）人: 廣州思涵信息科技有限公司;華南師范大學(xué)
• 主分類號(hào): G06Q10/06
• 分類號(hào): G06Q10/06;G06Q50/20;G06F17/30;G06K9/00;G10L15/08
• 代理公司: 廣州粵高專利商標(biāo)代理有限公司44102
• 代理人: 林麗明

1.一種基于人工智能技術(shù)的教師課堂教學(xué)過(guò)程分析方法，其特征在于，包括以下步驟：

S1：采集教師課堂上課的視頻；

S2：圖像識(shí)別處理：對(duì)上課圖像和視頻播放圖像分別進(jìn)行識(shí)別和標(biāo)記處理；

S3：語(yǔ)音識(shí)別處理：提取音頻數(shù)據(jù)，通過(guò)聲紋識(shí)別對(duì)音頻數(shù)據(jù)進(jìn)行分類；

S4：自動(dòng)分析和應(yīng)用：根據(jù)圖像識(shí)別處理和語(yǔ)音識(shí)別處理的結(jié)果，進(jìn)行教師課堂教學(xué)過(guò)程分析。

2.根據(jù)權(quán)利要求1所述的基于人工智能技術(shù)的教師課堂教學(xué)過(guò)程分析方法，其特征在于，步驟S2中，圖像識(shí)別處理包括以下步驟：

S2.1：根據(jù)圖像變化將視頻分割成若干片段；

S2.2：根據(jù)視頻圖像變化率設(shè)定的閾值，判斷各個(gè)片段是上課圖像還是視頻播放圖像：

對(duì)判斷為真實(shí)上課圖像，不做處理；

對(duì)判斷為視頻播放圖像，則視頻分段合并，進(jìn)行特征標(biāo)注；

S2.3：記錄視頻分段的時(shí)間值，存入數(shù)據(jù)庫(kù)。

3.根據(jù)權(quán)利要求1所述的基于人工智能技術(shù)的教師課堂教學(xué)過(guò)程分析方法，其特征在于，步驟S3中，語(yǔ)音識(shí)別處理包括以下步驟：

S3.1：將視頻圖像轉(zhuǎn)換成音頻文件；

S3.2：提取出沒(méi)有聲音的時(shí)間段，記錄時(shí)間值；

S3.3：讀取音頻數(shù)字信號(hào)，按[采樣頻率，采樣值]的格式進(jìn)行采樣，存入特征列表；

S3.4：提取聲紋特征，進(jìn)行特征匹配，完成聚類分析；

S3.5：完成音頻分類，進(jìn)行特征值標(biāo)注；

S3.6：記錄每個(gè)分類的時(shí)間值，存入數(shù)據(jù)庫(kù)。

4.根據(jù)權(quán)利要求1所述的基于人工智能技術(shù)的教師課堂教學(xué)過(guò)程分析方法，其特征在于，步驟S4中，自動(dòng)分析和應(yīng)用包括以下步驟：

S4.1：合并圖像識(shí)別處理和音頻識(shí)別處理的數(shù)據(jù)信息；

S4.2：完成教學(xué)過(guò)程、教學(xué)特點(diǎn)分析，自動(dòng)生成分析結(jié)果；

S4.3：以課程信息和時(shí)間為索引，導(dǎo)入學(xué)情分析數(shù)據(jù)；

S4.4：自動(dòng)生成教學(xué)診斷信息。

5.一種基于人工智能技術(shù)的教師課堂教學(xué)過(guò)程分析系統(tǒng)，其特征在于，包括：

視頻采集模塊：用于采集教師課堂上課的視頻；

圖像識(shí)別處理模塊：用于對(duì)上課圖像和視頻播放圖像分別進(jìn)行識(shí)別和標(biāo)記處理；

語(yǔ)音識(shí)別處理模塊：用于提取音頻數(shù)據(jù)，通過(guò)聲紋識(shí)別對(duì)音頻數(shù)據(jù)進(jìn)行分類；

自動(dòng)分析和應(yīng)用模塊：用于根據(jù)圖像識(shí)別處理和語(yǔ)音識(shí)別處理的結(jié)果，進(jìn)行教師課堂教學(xué)過(guò)程分析。