[發明專利]基于圖形識別的交互方法及電子設備

在審

• 申請號: 201810159703.7
• 申請日: 2018-02-26
• 公開（公告）號: CN108460124A
• 公開（公告）日: 2018-08-28
• 發明（設計）人: 徐樂;程璞;王西;顧嘉唯
• 申請（專利權）人: 北京物靈智能科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30;G06K9/00;G09B5/06;G09B7/00
• 代理公司: 北京風雅頌專利代理有限公司 11403
• 代理人: 李莎;李弘

本發明公開了一種基于圖形識別的交互方法及電子設備，包括：獲取第一待分析圖像；識別第一待分析圖像并得到識別結果；播放與識別結果相關聯的朗讀音頻文件；在朗讀音頻文件播放完畢后，根據識別結果，播放與第一待分析圖像的交互內容相關聯的提問音頻文件；獲取第二待分析圖像；確定第二待分析圖像中是否存在特征圖形；若第二待分析圖像中存在特征圖形，則確定特征圖形是否與交互區域存在重疊；其中，交互區域為與提問音頻文件中的問題的答案相對應的區域；若特征圖形與交互區域存在重疊，則播放正確音頻文件；若特征圖形與交互區域不存在重疊，則播放錯誤音頻文件。本發明提出的基于圖形識別的交互方法，可提高互動性能。

技術領域

本發明涉及數據處理技術領域，特別是指一種基于圖形識別的交互方法及電子設備。

背景技術

繪本，英文稱Picture Book，指一類以繪畫為主，并附有少量文字的書籍。繪本不僅可用于講故事、學知識，而且可以全面幫助孩子建構精神，培養多元智能。

現有技術中，在識別繪本后，設備通常自動播放相應的音頻文件，播放完畢后通常沒有互動過程，用戶體驗不足。并且，繪本的用戶通常是兒童，而兒童在使用讀繪本功能的過程中，容易產生注意力分散的情況，因此急需想出一種提高兒童注意力的方法。

發明內容

有鑒于此，本發明實施例的目的之一在于，提出一種基于圖形識別的交互方法及電子設備，可提高互動性能。

基于上述目的，本發明實施例的第一個方面，提供了一種基于圖形識別的交互方法，包括：

獲取第一待分析圖像；

識別所述第一待分析圖像并得到識別結果；

播放與所述識別結果相關聯的朗讀音頻文件；

在所述朗讀音頻文件播放完畢后，根據所述識別結果，播放與所述第一待分析圖像的交互內容相關聯的提問音頻文件；

獲取第二待分析圖像；

確定第二待分析圖像中是否存在特征圖形；

若第二待分析圖像中存在特征圖形，則確定所述特征圖形是否與交互區域存在重疊；其中，所述交互區域為與所述提問音頻文件中的問題的答案相對應的區域；

若所述特征圖形與交互區域存在重疊，則播放正確音頻文件；

若所述特征圖形與交互區域不存在重疊，則播放錯誤音頻文件。

可選的，所述的方法還包括：

獲取特征圖形數據；所述特征圖形數據的數量大于預設數量閾值；

對所述特征圖形數據進行人工標注；

利用標注后的特征圖形數據和不含特征圖形的訓練圖像數據，訓練得到特征檢測器；

所述確定第二待分析圖像中是否存在特征圖形的步驟包括：

利用所述特征檢測器確定第二待分析圖像中是否存在特征圖形。

可選的，所述特征圖形為手指圖形，所述特征檢測器為手指檢測器。

可選的，所述手指檢測器采用Haar+adaboost、svm+hog、faster-rcnn、yolo、ssd中的一種或多種方法實現。

可選的，所述的方法還包括：

獲取訓練圖像數據；

對所述訓練圖像數據人工標注出交互區域。

可選的，所述的方法還包括：

提取所述訓練圖像數據中的比對特征點；