[發明專利]圖像跟蹤方法及裝置

有效

• 申請號: 201810542151.8
• 申請日: 2018-05-30
• 公開（公告）號: CN108762507B
• 公開（公告）日: 2021-05-04
• 發明（設計）人: 王丹玲
• 申請（專利權）人: 遼東學院
• 主分類號: G06F3/01
• 分類號: G06F3/01;G09B5/04
• 代理公司: 北京超凡志成知識產權代理事務所(普通合伙) 11371
• 代理人: 吳迪

本發明實施例提供一種圖像跟蹤方法及裝置。該方法包括：智能手環實時探測智能書本當前頁上射頻芯片的射頻信號，并將所述射頻信號發送給語音播報終端；圖像跟蹤器實時跟蹤拍攝閱讀者的眼球圖像，并將所述眼球圖像發送給所述語音播報終端；所述語音播報終端基于所述射頻信號和所述眼球圖像獲取所述閱讀者正在閱讀的書本內容，并按照預設規則將所述正在閱讀的書本內容進行語音播報。由此，本申請提供的圖像跟蹤方法及裝置使用方便，無需任何操作即可自動分析兒童正在閱讀的書本內容，并對其進行自動語音播報，大大提高了學習效果，趣味性強，利于學前啟蒙教育。

技術領域

本發明涉及圖像跟蹤領域，具體而言，涉及一種圖像跟蹤方法及裝置。

背景技術

目前，隨著各種讀物及書籍的日益發展，尤其是少年兒童教育的迫切需要，對各種書的技術要求也越來越高。在已知技術中，現有的書包括兒童讀物主要是在紙上印刷文字或/和圖畫后裝訂成書。需要閱讀時，翻開書本，但對于少年兒童或是需要看圖識字的少兒，更需要有人幫助閱讀，目前的產品多為點讀筆或者自動全文播報，但是上使用點讀筆操作麻煩，自動全文播報針對性差，無法知曉兒童的關注焦點，使得學習枯燥，效果差，使用不便。

發明內容

為了克服現有技術中的上述不足，本發明的目的在于提供一種圖像跟蹤方法及裝置，使用方便，無需任何操作即可自動分析兒童正在閱讀的書本內容，并對其進行自動語音播報，大大提高了學習效果，趣味性強，利于學前啟蒙教育。

為了實現上述目的，本發明實施例采用的技術方案如下：

第一方面，本發明實施例提供一種圖像跟蹤方法，應用于圖像跟蹤系統，所述圖像跟蹤系統包括智能手環、圖像跟蹤器、智能書本以及與所述智能手環和所述圖像跟蹤器通信連接的語音播報終端，其中，所述圖像跟蹤器設置在所述智能書本的監測區域中，所述智能書本中的每一頁上設置有射頻芯片，所述智能手環與所述射頻芯片進行信號交互，所述方法包括：

所述智能手環實時探測所述智能書本當前頁上射頻芯片的射頻信號，并將所述射頻信號發送給所述語音播報終端；

所述圖像跟蹤器實時跟蹤拍攝閱讀者的眼球圖像，并將所述眼球圖像發送給所述語音播報終端；

所述語音播報終端基于所述射頻信號和所述眼球圖像獲取所述閱讀者正在閱讀的書本內容，并按照預設規則將所述正在閱讀的書本內容進行語音播報。

可選地，所述語音播報終端中存儲有所述智能書本每頁的書本頁標識和對應的書本內容，所述語音播報終端基于所述射頻信號和所蹤眼球圖像獲取所述閱讀者正在閱讀的書本內容，并按照預設規則將所述正在閱讀的書本內容進行語音播報的步驟，包括：

所述語音播報終端對所述射頻信號進行信號解析，獲得所述射頻信號對應的書本頁標識；

基于所述書本頁標識查找所述智能書本當前頁的書本內容，并實時對所述眼球圖像進行圖像分析，獲取所述閱讀者的眼球注視位置；

根據所述眼球注視位置在所述當前頁中提取所述閱讀者正在閱讀的書本內容，并按照預設規則將所述正在閱讀的書本內容進行語音播報。

可選地，所述實時對所述眼球圖像進行圖像分析，獲取所述閱讀者的眼球注視位置的步驟，包括：

實時對所述眼球圖像中閱讀者的眼球瞳孔在所述當前頁上的坐標位置，以獲得所述閱讀者的眼球注視位置。

可選地，所述根據所述眼球注視位置在所述當前頁中提取所述閱讀者正在閱讀的書本內容的步驟，包括：

以所述眼球注視位置為圓心或中心，結合預設的眼球觀察半徑或眼球觀察行數和眼球觀察字數得到閱讀區域；

從所述當前頁中解析所述閱讀區域對應所示的書本內容作為所述閱讀者正在閱讀的書本內容。