[發明專利]一種監控教學效果的方法、裝置、介質和電子設備

在審

• 申請號: 202010586528.7
• 申請日: 2020-06-24
• 公開（公告）號: CN111800646A
• 公開（公告）日: 2020-10-20
• 發明（設計）人: 王珂晟;黃勁;黃鋼;許巧齡;郝緣
• 申請（專利權）人: 北京安博盛贏教育科技有限責任公司
• 主分類號: H04N21/2187
• 分類號: H04N21/2187;H04N21/233;H04N21/439;H04N21/845;H04N21/8547;G10L15/18;G06K9/00;G06Q50/20
• 代理公司: 北京睿馳通程知識產權代理事務所(普通合伙) 11604
• 代理人: 張文平

1.一種監控教學效果的方法，其特征在于，包括：

獲取多個采集源發送的學生聽課的直播視頻流；

基于預設提取規則獲取每個直播視頻流的視頻時間戳，并基于所述視頻時間戳從所述直播視頻流中提取學生聽課圖像；

對所述學生聽課圖像進行面部識別，獲取學生面部圖像；

將所述學生面部圖像輸入所述教學效果分析模型，獲取對應的教學效果類型。

2.根據權利要求1所述的方法，其特征在于，所述基于預設提取規則獲取每個直播視頻流的視頻時間戳，包括：

對所述直播音頻流進行斷句處理，獲取第一語句音頻；

對所述第一語句音頻進行語義分析，獲取第一關鍵詞，并組成第一關鍵詞集；所述第一關鍵詞是指直播教學過程中表示教學進度的核心詞；

將所述第一關鍵詞集與第一課程知識關鍵詞庫中課程知識關鍵詞集進行匹配；

當匹配成功時，則獲取所述第一語句音頻的第一開始時間戳，并基于所述第一開始時間戳和預設第一語句時長獲取第一視頻提取時間閾值，且在所述第一視頻提取時間閾值內獲取每個直播視頻流的視頻時間戳。

3.根據權利要求2所述的方法，其特征在于，所述對所述直播音頻流進行斷句處理，獲取第一語句音頻，包括：

基于預設第一音頻提取周期和預設第一音頻時長獲取第一音頻提取時間閾值；

基于所述第一音頻提取時間閾值從所述直播音頻流中提取第一音頻片段；

對所述第一音頻片段進行斷句處理，獲取第一語句音頻。

4.根據權利要求1所述的方法，其特征在于，所述基于預設提取規則獲取每個直播視頻流的視頻時間戳，包括：

基于預設第二音頻提取周期和預設第二音頻時長獲取第二音頻提取時間閾值；

基于所述第二音頻提取時間閾值從所述直播音頻流中提取第二音頻片段；

對所述第二音頻片段進行語義分析，獲取第二關鍵詞，并組成第二關鍵詞集；所述第二關鍵詞是指直播教學過程中表示教學進度的核心詞；

將所述第二關鍵詞集與第二課程知識關鍵詞庫中課程知識關鍵詞集進行匹配；

當匹配成功時，則獲取所述第二語句音頻的第二開始時間戳，并基于所述第二開始時間戳和預設第二語句時長獲取第二視頻提取時間閾值，且在所述第二視頻提取時間閾值內獲取每個直播視頻流的視頻時間戳。

5.根據權利要求1所述的方法，其特征在于，在所述對所述學生聽課圖像進行面部識別，獲取所述學生面部圖像后，還包括：

對所述學生面部圖像進行去雜處理。

6.根據權利要求1所述的方法，其特征在于，在所述對所述學生聽課圖像進行面部識別，獲取所述學生面部圖像后，還包括：

對所述學生面部圖像進行歸一化處理，獲取圖像尺寸一致的所述學生面部圖像。

7.根據權利要求1所述的方法，其特征在于，在所述獲取對應的教學效果類型后，還包括：

對所述教學效果類型進行分類統計，獲取教學效果評價。

8.一種監控教學效果的裝置，其特征在于，包括：

獲取直播視頻流單元，用于獲取多個采集源發送的學生聽課的直播視頻流；

提取學生聽課圖像單元，用于基于預設提取規則獲取每個直播視頻流的視頻時間戳，并基于所述視頻時間戳從所述直播視頻流中提取學生聽課圖像；

獲取學生面部圖像單元，用于對所述學生聽課圖像進行面部識別，獲取學生面部圖像；

獲取教學效果類型單元，用于將所述學生面部圖像輸入所述教學效果分析模型，獲取對應的教學效果類型。

9.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于，所述程序被處理器執行時實現如權利要求1至7中任一項所述的方法。

10.一種電子設備，其特征在于，包括：

一個或多個處理器；

存儲裝置，用于存儲一個或多個程序，當所述一個或多個程序被所述一個或多個處理器執行時，使得所述一個或多個處理器實現如權利要求1至7中任一項所述的方法。