[發明專利]一種基于多媒體應用場景的AR漢字識別系統

在審

• 申請號: 202010500234.8
• 申請日: 2020-06-04
• 公開（公告）號: CN111652316A
• 公開（公告）日: 2020-09-11
• 發明（設計）人: 高曉冬;李斌
• 申請（專利權）人: 上海仙劍文化傳媒股份有限公司
• 主分類號: G06K9/62
• 分類號: G06K9/62;G06N3/04;G06Q50/20;G06T19/00;G09B5/00;G09B5/06;G09B7/00
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發明屬于AR教學設備技術領域，具體公開了一種基于多媒體應用場景的AR漢字識別系統，包括處理電路模塊、數據庫模塊、訓練模塊、AR識別模塊、文字糾錯模塊和多媒體播放模塊，所述數據庫模塊、訓練模塊、AR識別模塊、文字糾錯模塊和多媒體播放模塊與處理電路模塊連接。本發明首創寫字教學與糾錯，在各重要教學板塊，用AR技術進行助教，以情景再現為核心，提高學生們識、記和考試能力，增加了AI朗讀糾錯和智能判定評分功能對學生的書寫和朗讀進行糾錯，提高學生的書寫和朗讀能力，從而提高教學效果。

技術領域

本發明涉及AR教學設備相關領域，具體為一種基于多媒體應用場景的AR漢字識別系統。

背景技術

開展小學語文漢字文化教育工作的重要意義開展小學語文漢字文化教育工作，滲透漢字文化因素，可以為學生創設輕松、愉快的學習環境，使小學生字教學更有趣，幫助學生減輕學習壓力。

目前小學語文漢字教學主要存在以下問題：1、教學方法趨于傳統，學生依然靠“死記硬背”的方式來學習漢字；2、教師的漢字文化素養有待提升；3、忽視了三維目標教學工作，目前市場上主要通過在線教育方式以及AR智能識別技術彌補現有技術的不足，但是市場調研發現，目前好的教師仍然還是在傳統教育行業，適應新技術環境下互聯網教育復合人才缺乏，對技術的依賴也導致了被技術限制，同時AR智能識別僅用作翻譯、字義解釋、關鍵詞搜索等，應用面非常狹窄，基于此，現設計一種基于多媒體應用場景的AR漢字識別系統來解決上述問題。

發明內容

本發明的目的在于提供一種基于多媒體應用場景的AR漢字識別系統，以解決上述背景技術中提出的問題。

為實現上述目的，本發明提供如下技術方案：一種基于多媒體應用場景的AR漢字識別系統，包括處理電路模塊、數據庫模塊、訓練模塊、AR識別模塊、文字糾錯模塊和多媒體播放模塊，所述數據庫模塊、訓練模塊、AR識別模塊、文字糾錯模塊和多媒體播放模塊與處理電路模塊連接。

優選的，所述數據庫模塊包括訓練集、測試集和教學集，所述訓練集和測試集按照4:1劃分，訓練集和測試集共1176000張阿拉伯數字、特殊符號和漢字圖像資料，所述教學集包括各大書法集書寫教學視頻。

優選的，所述訓練模塊包括課文朗讀單元和APP習題測評單元，所述課文朗讀單元用于通過AI朗讀糾錯和智能判定評分技術對學生朗讀進行訓練，所述APP習題測評單元用于根據行為軌跡了解學生的學習狀況，通過人工智能從數據庫模塊中選出最具針對性的題目，對孩子進行強化訓練，直到完全做對理解為止。

優選的，所述AR識別模塊利用計算機對圖像進行處理、分析和理解，以識別各種不同模式的目標和對象，所述AR識別模塊采用基于統計理論的支持向量機模型對系統進行深度學習訓練；通過使用模擬生物神經網絡的人工神經網絡模型,自主的從底層像素中提取特征來訓練網絡模型,通過輸出層實現圖像識別的目標。

優選的，所述AR識別模塊還包括圖像對比技術單元、向量機模型單元和擴展單元，所述圖像比對技術單元通過矩陣矯正，像素點位比對和標準輸出判別作為比對指標對圖形進行比對和擬合度評分；所述向量機模型單元是根據人工提取的特征來訓練分類器,通過分類器來達到圖片識別的目標，所述擴展單元用于根據學生書寫的漢子或者詞組自動從數據庫模塊中篩選出類似的圖片和相關故事。

優選的，所述文字糾錯模塊包括識別處理單元、特征提取單元、分析判斷單元和智能糾錯單元，所述識別處理單元用于將已分割出的文字圖形信息加以區分，去除信號中的污點、空白等噪聲，增強文字圖像的信息；所述特征提取單元用于從整形和規范化的信號中抽取反映字符本身的有用信息，供識別部分進行識別；所述分析判斷單元用于根據抽取的特征，通過AR識別模塊對文字進行分類，確定其屬性，達到識別的目的；所述智能糾錯單元用于根據識別手寫文字以及識別學生朗讀內容，與數據庫模塊中的標準字比較，通過多媒體播放模塊指出不規范的地方。