[發明專利]一種點讀終端的音頻播放方法、裝置、點讀終端及介質

在審

• 申請號: 201911323090.7
• 申請日: 2019-12-20
• 公開（公告）號: CN113010699A
• 公開（公告）日: 2021-06-22
• 發明（設計）人: 王玥;顧景;李揚;程駿;龐建新;熊友軍
• 申請（專利權）人: 深圳市優必選科技股份有限公司
• 主分類號: G06F16/432
• 分類號: G06F16/432;G06F16/438;G06F16/48;G06T7/73;G09B5/04;G09B5/06
• 代理公司: 深圳中一聯合知識產權代理有限公司 44414
• 代理人: 李娟

本申請適用于點讀終端技術領域，提供了一種點讀終端的音頻播放方法、裝置、點讀終端及介質，其中，一種點讀終端的音頻播放方法，通過構建內頁圖像和參考圖像之間的單應矩陣，利用已訓練好的位置預估模型對目標圖像進行位置預估，得到相應的預估位置信息，由于目標圖像是從內頁圖像中選取得到，且內頁圖像中的內容與參考圖像中的內容能夠基于單應矩陣實現相互映射，因此能夠基于預估位置信息與單應矩陣在參考圖像中確定出目標位置信息，進而根據該目標位置信息從目標音頻集合中確定出目標音頻文件進行播放，不僅降低了點讀終端的實現成本，還擴寬了點讀終端的適用范圍。

技術領域

本申請屬于點讀終端技術領域，尤其涉及一種點讀終端的音頻播放方法、裝置、點讀終端及計算機可讀存儲介質。

背景技術

隨著智能終端的普及程度越來越高，越來越多的智能產品也深受消費者們追捧，例如，智能早教機器人、點讀終端等。

現有的點讀終端，如點讀筆，其實現點讀功能的方案是通過在筆尖處設置有光電識別器，借由該光電識別器識別書籍中的識別碼，進而由點讀筆根據該識別碼播放相應的音頻文件，實現點讀功能。但是，上述方案對書籍的印刷有較為嚴格的要求，必須采用識別碼和反射紅外光涂料印刷的書籍，不僅提高了點讀功能的實現成本，而且未采用識別碼和反射紅外光涂料印刷的書籍則無法被點讀終端識別。由此可見，現有的點讀終端在實現方案時存在實現成本較高且適用范圍較小的問題。

發明內容

有鑒于此，本申請實施例提供了一種點讀終端的音頻播放方法、裝置、點讀終端及計算機可讀存儲介質，以解決現有的點讀終端在實現方案時存在實現成本較高且適用范圍較小的問題。

本申請實施例的第一方面提供了一種點讀終端的音頻播放方法，包括：

獲取目標書籍的內頁圖像，并根據所述內頁圖像從本地數據庫中確定出相應的參考圖像和目標音頻集合；

基于所述內頁圖像和所述參考圖像構建單應矩陣；

將從所述內頁圖像中選取的目標圖像輸入已訓練好的位置預估模型，得到預估位置信息，并基于所述預估位置信息與所述單應矩陣，從所述參考圖像中確定出目標位置信息；

根據所述目標位置信息從所述目標音頻集合中確定出目標音頻文件；

播放所述目標音頻文件。

進一步的，所述基于所述內頁圖像和所述參考圖像構建單應矩陣，包括：

在所述內頁圖像中和所述參考圖像中分別構建相同的坐標系；

基于所述坐標系，分別從所述內頁圖像和所述參考圖像中確定出匹配的點對信息；

根據所述點對信息構建3×3的齊次矩陣H，并將所述齊次矩陣H識別為單應矩陣H。

進一步的，所述將從所述內頁圖像中選取的目標圖像輸入已訓練好的位置預估模型，得到預估位置信息，并基于所述預估位置信息與所述單應矩陣，從所述參考圖像中確定出目標位置信息的步驟之前，還包括：

獲取樣本書籍的內頁樣本圖像，并基于所述內頁樣本圖像構建樣本圖像集合；其中，所述樣本圖像集合中的每張樣本圖像中均包含所述點讀終端的筆尖位置；

利用所述樣本圖像集合訓練預先構建的位置預估模型，得到已訓練好的位置預估模型。

進一步的，所述目標圖像中包含所述點讀終端的當前筆尖位置；

所述將從所述內頁圖像中選取的目標圖像輸入已訓練好的位置預估模型，得到預估位置信息，并基于所述預估位置信息與所述單應矩陣確定目標位置信息，包括：

獲取從所述內頁圖像中選取的目標圖像；