[發明專利]一種分析方法及裝置

有效

• 申請號: 201911307576.1
• 申請日: 2019-12-18
• 公開（公告）號: CN110728604B
• 公開（公告）日: 2020-03-31
• 發明（設計）人: 李小波;張剛強
• 申請（專利權）人: 恒信東方文化股份有限公司
• 主分類號: G06Q50/20
• 分類號: G06Q50/20;G06F16/9535;G06K9/00;G06K9/62
• 代理公司: 北京卓特專利代理事務所(普通合伙) 11572
• 代理人: 陳變花

本申請公開一種分析方法及裝置。所述分析方法包括采集視頻畫面并捕捉兒童表情動作圖像；從捕捉到的表情動作圖像中識別兒童在觀看節目及回答問題時的面部表情及肢體動作，將識別出的面部表情和肢體動作轉化為對應的表情動作標簽；運用聚類分析算法對收集的視頻畫面、兒童表情動作標簽以及兒童基礎信息進行聚合分析，得到多元智能發展分析結果；根據多元智能發展分析結果自動選取兒童薄弱項相關的課程或節目。實現學齡前兒童多元智能方面的分析，讓家長及時了解到孩子的薄弱方面，為家長提供推薦建議，提升孩子全方面發展能力。

技術領域

本申請涉及智能分析領域，尤其涉及一種分析方法及裝置。

背景技術

兒童是祖國的未來，1-8周歲學齡前兒童的身心健康發展是現如今國家和家長的關注重心。目前的孩子由于父母陪伴較少或教育偏差，很多孩子不能德智體美勞全方位全面發展。

近年來，隨著計算機網絡以及圖像處理、傳輸技術的飛速發展，視頻監控技術也有了長足的發展。視頻節目以其直觀、準確、及時和信息內容豐富而廣泛應用于許多場合。然而現有的視頻節目方面的系統，基本都是針對推薦方面的，并沒有對學齡前兒童的多元智能方面的分析，現有基于推薦的方法針對的是學齡前兒童群體進行推薦，然而由于各個兒童的多元智能發展并不相同，所以現如今亟需針對性地對于個體兒童進行多元智能分析的方法。

發明內容

本申請提供了一種分析方法，包括如下步驟：

采集視頻畫面并捕捉兒童表情動作圖像；視頻畫面包括節目播放環節的節目畫面、互動環節的互動畫面和問答環節的提問畫面，兒童表情動作圖像包括兒童在節目播放環節、互動環節和問答環節問題的表情動作圖像；

從捕捉到的表情動作圖像中識別兒童在觀看節目及回答問題時的面部表情及肢體動作，將識別出的面部表情和肢體動作轉化為對應的表情動作標簽；

運用聚類分析算法對收集的視頻畫面、兒童表情動作標簽以及兒童基礎信息進行聚合分析，得到多元智能發展分析結果；

根據多元智能發展分析結果自動選取兒童薄弱項相關的課程或節目。

如上所述的分析方法，其中收集視頻畫面以及捕捉兒童表情動作圖像，具體包括如下子步驟：

當接收到截屏指令后，根據當前播放節目制式確定要分配的截屏圖像的存儲區大小；

在視頻播放及互動過程中，每間隔預設時長通過拍攝裝置捕捉兒童表情動作圖像；

記錄采集兒童表情動作圖像的時刻，并按照采集時刻確定截屏時刻，根據截屏時刻從視頻畫面中查找對應時間的播放畫面；

將采集的兒童畫面與對應截屏的播放畫面存儲在分配的截屏存儲區中。

如上所述的分析方法，其中從捕捉到的表情動作圖像中識別兒童在觀看節目及回答問題時的面部表情及肢體動作并轉化為對應的標簽，具體包括如下子步驟：

構建并訓練基于卷積神經網絡的情緒識別模型和動作識別模型；

將采集到的兒童表情圖像輸入情緒識別模型中，輸出兒童表情標簽；

將采集到的兒童動作圖像輸入動作識別模型中，輸出兒童動作標簽。

如上所述的分析方法，其中運用聚類分析算法對收集的日志信息、兒童表情動作標簽以及兒童基礎信息進行聚合分析，得到多元智能發展分析結果，具體包括如下子步驟：

對日志信息、兒童標簽動作標簽以及兒童基本信息進行關鍵詞的提取和篩選，計算每個關鍵詞在文本集合中的權重值，得到權重值集合；

將獲取到的權重值集合輸入聚類分析模型中，對兒童信息進行聚類分析，輸出包括多種智能發展方向的多元智能發展分析結果；