[發(fā)明專利]一種用于教學(xué)考評的視頻信息采集方法及圖像處理系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202110566344.9
• 申請日: 2021-05-24
• 公開（公告）號: CN112990892A
• 公開（公告）日: 2021-06-18
• 發(fā)明（設(shè)計）人: 金龍;張英俊
• 申請（專利權(quán)）人: 南京百倫斯智能科技有限公司
• 主分類號: G06Q10/10
• 分類號: G06Q10/10;G06Q10/06;G06Q50/20;G06K9/00;G06K9/38;G06K9/40;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 南京泰普專利代理事務(wù)所(普通合伙) 32360
• 代理人: 方曉雯

1.一種用于教學(xué)考評的視頻信息采集方法，其特征在于，包括以下步驟：

視頻信息采集設(shè)備在應(yīng)用過程中獲取實時場景下的視頻數(shù)據(jù)，在經(jīng)過臨時緩存區(qū)后，通過壓縮傳輸至數(shù)據(jù)存儲服務(wù)器；

構(gòu)建教學(xué)考評指標(biāo)體系；

根據(jù)用戶終端需求，獲取所述數(shù)據(jù)存儲服務(wù)器中存儲的對應(yīng)視頻數(shù)據(jù)；

提取所述對應(yīng)視頻數(shù)據(jù)中的數(shù)據(jù)特征；

融合多種數(shù)據(jù)特征，對教學(xué)考評行為進行分類，并獲取最終考評結(jié)果；

根據(jù)所述最終考評結(jié)果，智能化推薦匹配課程。

2.根據(jù)權(quán)利要求1所述的一種用于教學(xué)考評的視頻信息采集方法，其特征在于，建立臨時緩存區(qū)，用于存儲所述實時場景下的視頻數(shù)據(jù)；所述臨時緩存區(qū)為環(huán)形存儲隊列；

所述實時場景下的視頻數(shù)據(jù)存儲于臨時緩存區(qū)中，當(dāng)臨時緩存區(qū)中的數(shù)據(jù)量達到預(yù)設(shè)大小時，將數(shù)據(jù)打包傳輸至云端；

所述臨時緩存區(qū)存儲數(shù)值的過程為：移動頭指針，指向存儲隊列的下一個存儲空間，通過數(shù)值的覆蓋的方式，循環(huán)更新存儲隊列中的數(shù)值。

3.根據(jù)權(quán)利要求1所述的一種用于教學(xué)考評的視頻信息采集方法，其特征在于，所述教學(xué)考評指標(biāo)體系中包含針對用戶學(xué)習(xí)過程中的面部表情識別判斷，具體步驟為：

獲取存儲在云端的視頻圖像數(shù)據(jù)，并進行預(yù)處理；

提取預(yù)處理后的圖像數(shù)據(jù)特征；

構(gòu)建分類器，根據(jù)所述圖像數(shù)據(jù)特征，通過分類識別獲得識別結(jié)果；

輸出當(dāng)前表情對應(yīng)的學(xué)習(xí)狀態(tài)，并作為教學(xué)考評結(jié)果的參考數(shù)據(jù)之一；

其中，所述預(yù)處理的過程為：

提取視頻圖像數(shù)據(jù)的視頻幀，

檢測出所述視頻幀中的人臉圖像，

利用中值濾波對圖像進行降噪和去噪，

根據(jù)需求對人臉圖像進行糾正對齊和圖像的灰度轉(zhuǎn)換。

4.根據(jù)權(quán)利要求1所述的一種用于教學(xué)考評的視頻信息采集方法，其特征在于，

建立用于提取圖像數(shù)據(jù)特征的神經(jīng)網(wǎng)絡(luò)；所述神經(jīng)網(wǎng)絡(luò)每層卷積層后面緊接激活層；所述神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)層之間的權(quán)重值，在訓(xùn)練神經(jīng)網(wǎng)絡(luò)學(xué)習(xí)能力的時候，通過反向傳播的方式進行更新；

在增加神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)深度的同時，將神經(jīng)網(wǎng)絡(luò)的線層結(jié)構(gòu)與深層網(wǎng)絡(luò)通過殘差塊進行連接；其中，所述殘差塊的結(jié)構(gòu)表達式為：

式中，表示該殘差結(jié)構(gòu)的輸出；表示通過卷積層的映射結(jié)果；其中，x表示輸入的恒等映射，在反向傳播過程中，對x求導(dǎo)的值恒等于1。