[發(fā)明專利]一種基于視覺識別的閱讀方法及裝置

在審

• 申請?zhí)枺?/td>: 201910023276.4
• 申請日: 2019-01-10
• 公開（公告）號: CN109800748A
• 公開（公告）日: 2019-05-24
• 發(fā)明（設(shè)計）人: 曹建明
• 申請（專利權(quán)）人: 深圳市格萊科技有限公司
• 主分類號: G06K9/20
• 分類號: G06K9/20
• 代理公司: 深圳市精英專利事務(wù)所 44242
• 代理人: 馮筠

1.一種基于視覺識別的閱讀方法，其特征在于，包括：

獲取書籍內(nèi)容的圖像；

根據(jù)所述獲取的書籍內(nèi)容的圖像，匹配所述圖像中間圈特征點；

根據(jù)所述匹配得到的所述圖像中間圈特征點，集合所述匹配得到的特征點，存儲所述集合的所述匹配得到的特征點；

對所述存儲的特征點進行圖像識別匹配包括位置矯正、幾何矯正、坐標(biāo)重新排列等，識別匹配出書籍內(nèi)容；

根據(jù)所述識別匹配出的書籍內(nèi)容，播放對應(yīng)所述識別匹配出的書籍內(nèi)容的語音包括從坐標(biāo)文件庫中調(diào)取坐標(biāo)進行對比、點讀判斷和播放多媒體文件等。

2.如權(quán)利要求1所述的基于視覺識別的閱讀方法，其特征在于，所述根據(jù)所述獲取的書籍內(nèi)容的圖像，對所述獲取的書籍內(nèi)容的圖像的圖像特征點進行檢測，檢測得到圖像特征點描述符，根據(jù)所述檢測得到的圖像特征點描述符，匹配所述圖像中間圈特征點，包括：

根據(jù)所述獲取的書籍內(nèi)容的圖像，采用穩(wěn)定特征加速算法，對所述獲取的書籍內(nèi)容的圖像的圖像特征點進行檢測，檢測得到圖像特征點描述符，根據(jù)所述檢測得到的圖像特征點描述符，匹配所述圖像中間圈特征點。

3.如權(quán)利要求1或2所述的基于視覺識別的閱讀方法，其特征在于，所述根據(jù)所述匹配得到的所述圖像中間圈特征點，集合所述匹配得到的特征點，存儲所述集合的所述匹配得到的特征點，包括：

根據(jù)所述匹配得到的所述圖像中間圈特征點，集合所述匹配得到的特征點，采用分割k維數(shù)據(jù)空間的數(shù)據(jù)結(jié)構(gòu)方式，存儲所述集合的所述匹配得到的特征點。

4.如權(quán)利要求3所述的基于視覺識別的閱讀方法，其特征在于，所述對所述存儲的特征點進行圖像識別匹配包括位置矯正、幾何矯正、坐標(biāo)重新排列等，識別匹配出書籍內(nèi)容，包括：

采用K-鄰近算法方式，對所述存儲的特征點進行圖像識別匹配包括位置矯正、幾何矯正、坐標(biāo)重新排列等，識別匹配出書籍內(nèi)容。

5.如權(quán)利要求4所述的基于視覺識別的閱讀方法，其特征在于，所述根據(jù)所述識別匹配出的書籍內(nèi)容，播放對應(yīng)所述識別匹配出的書籍內(nèi)容的語音包括從坐標(biāo)文件庫中調(diào)取坐標(biāo)進行對比、點讀判斷和播放多媒體文件等，包括：

根據(jù)所述識別匹配出的書籍內(nèi)容，采用隨機抽樣一致算法方式，為所述識別匹配出的書籍內(nèi)容配置語音，并播放所述配置的書籍內(nèi)容的語音，播放對應(yīng)所述識別匹配出的書籍內(nèi)容的語音包括從坐標(biāo)文件庫中調(diào)取坐標(biāo)進行對比、點讀判斷和播放多媒體文件等。

6.一種基于視覺識別的閱讀裝置，其特征在于，包括：

獲取模塊、匹配模塊、存儲模塊、識別模塊和播放模塊；

所述獲取模塊，用于獲取書籍內(nèi)容的圖像；

所述匹配模塊，用于根據(jù)所述獲取的書籍內(nèi)容的圖像，匹配所述圖像中間圈特征點；

所述存儲模塊，用于根據(jù)所述匹配得到的所述圖像中間圈特征點，集合所述匹配得到的特征點，存儲所述集合的所述匹配得到的特征點；

所述識別模塊，用于對所述存儲的特征點進行圖像識別匹配包括位置矯正、幾何矯正、坐標(biāo)重新排列等，識別匹配出書籍內(nèi)容；

所述播放模塊，用于根據(jù)所述識別匹配出的書籍內(nèi)容，播放對應(yīng)所述識別匹配出的書籍內(nèi)容的語音包括從坐標(biāo)文件庫中調(diào)取坐標(biāo)進行對比、點讀判斷和播放多媒體文件等。

7.如權(quán)利要求6所述的基于視覺識別的閱讀裝置，其特征在于，所述匹配模塊，具體用于：

根據(jù)所述獲取的書籍內(nèi)容的圖像，采用穩(wěn)定特征加速算法，對所述獲取的書籍內(nèi)容的圖像的圖像特征點進行檢測，檢測得到圖像特征點描述符，根據(jù)所述檢測得到的圖像特征點描述符，匹配所述圖像中間圈特征點。

8.如權(quán)利要求6或7所述的基于視覺識別的閱讀裝置，其特征在于，所述存儲模塊，具體用于：

根據(jù)所述匹配得到的所述圖像中間圈特征點，集合所述匹配得到的特征點，采用分割k維數(shù)據(jù)空間的數(shù)據(jù)結(jié)構(gòu)方式，存儲所述集合的所述匹配得到的特征點。