[發明專利]一種圖像處理的方法、裝置、可讀存儲介質和電子設備

在審

• 申請號: 202110335314.7
• 申請日: 2021-03-29
• 公開（公告）號: CN113052088A
• 公開（公告）日: 2021-06-29
• 發明（設計）人: 程馳;周佳;包英澤
• 申請（專利權）人: 北京大米科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/46;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京睿派知識產權代理事務所(普通合伙) 11597
• 代理人: 劉鋒;楊春曉

1.一種圖像處理的方法，其特征在于，該方法包括：

獲取一組視頻流，其中，所述一組視頻流中包括至少兩個視頻流，所述至少兩個視頻流中包括一個教師視頻流和至少一個學生視頻流；

在每個所述視頻流中抽取多張圖像；

通過預先訓練的人臉檢測模型，確定所述多張圖像中的至少一張待處理圖像，其中，所述待處理圖像中包括人臉；

確定每張所述待處理圖像的圖像特征；

根據所述至少一張待處理圖像對應的圖像特征確定所述一組視頻流的等級。

2.如權利要求1所述的方法，其特征在于，所述圖像特征包括笑臉特征、人臉角度特征、以及特定手勢特征中的至少一項。

3.如權利要求2所述的方法，其特征在于，當所述圖像特征為笑臉特征時，所述確定每張所述待處理圖像的圖像特征，具體包括：

通過預先訓練的笑臉檢測模型，確定所述待處理圖像中的笑臉特征。

4.如權利要求2所述的方法，其特征在于，當所述圖像特征為人臉角度特征時，所述確定每張所述待處理圖像的圖像特征，具體包括：

通過預先訓練的人臉角度檢測模型，確定所述待處理圖像中的人臉角度特征。

5.如權利要求2所述的方法，其特征在于，當所述圖像特征為特定手勢特征時，所述確定每張所述待處理圖像的圖像特征，具體包括：

通過預先訓練的特定手勢檢測模型，確定所述待處理圖像中的特定手勢特征。

6.如權利要求1所述的方法，其特征在于，所述根據所述至少一張待處理圖像對應的圖像特征確定所述一組視頻流的等級，具體包括：

根據所述至少一張待處理圖像對應的圖像特征確定所述一組視頻流的視覺指標，其中，所述視覺指標包括人臉數量、笑臉數量、正臉數量、專注總時長、分時段專注時長、以及手勢數量中的至少一項；

根據所述視覺指標確定所述一組視頻流的等級。

7.如權利要求6所述的方法，其特征在于，該方法還包括：

根據所述視覺指標以及所述一組視頻流段平均視覺指標確定所述一組視頻流的等級，其中，所述平時視覺指標包括平均專注總時長和/或分時段平均專注時長。

8.如權利要求1所述的方法，其特征在于，所述人臉檢測模型為根據歷史人臉數據訓練的深度學習神經網絡模型。

9.如權利要求3所述的方法，其特征在于，所述笑臉檢測模型的訓練過程包括：

獲取歷史笑臉圖像與歷史非笑臉圖像；

根據所述歷史笑臉圖像與所述歷史非笑臉圖像訓練所述笑臉檢測模型，其中，所述笑臉檢測模型為二分類模型。

10.如權利要求4所述的方法，其特征在于，所述人臉角度檢測模型為根據歷史人臉角度數據訓練的深度學習神經網絡模型，其中，所述人臉角度檢測模型用于檢測人臉與顯示屏幕之間的角度。

11.如權利要求5所述的方法，其特征在于，所述特定手勢檢測模型為根據歷史特定手勢數據訓練的深度學習神經網絡模型。

12.如權利要求7所述的方法，其特征在于，該方法還包括：

根據所述視覺指標、所述一組視頻流段平均視覺指標以及語音指標確定所述一組視頻流的等級，其中，所述語音指標包括學生開口次數、師生互動次數以及師生互動總次數中的至少一項。