[發明專利]電子文件標記方法及裝置

有效

• 申請號: 201410054574.7
• 申請日: 2014-02-18
• 公開（公告）號: CN104571488B
• 公開（公告）日: 2018-03-23
• 發明（設計）人: 鄒嘉駿;林伯聰;高嘉文
• 申請（專利權）人: 由田新技股份有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06K9/00;G06F17/30
• 代理公司: 北京同立鈞成知識產權代理有限公司11205
• 代理人: 臧建明

技術領域

本發明涉及一種瀏覽電子文件的方法及裝置，尤其涉及一種電子文件標記方法及裝置。

背景技術

隨著信息的數字化，越來越多傳統信息界面被電子產品所取代。例如，數字相框和數碼相機取代了傳統的相片和底片，而例如個人數字助理（Personal Digital Assistant，PDA）、智能手機、閱讀器等的電子產品，則成為了新一代的文件閱讀平臺。使用者可以通過在同一臺攜帶型電子產品中存放多個電子書等電子文件，改善了傳統攜帶紙本書籍的不便性。并且，通過攜帶型電子產品可隨時來觀看其中的電子書。

而目前也對應發展出幾種針對電子書的控制方法。例如，美國專利號US7429108提出一種利用眼球追蹤技術（gaze-tracking applications）的電子閱讀記錄器，能幫助使用者尋找上次閱讀的段落。

發明內容

本發明提供一種電子文件標記方法及裝置，通過點頭動作或眨眼動作，并隨著眼球的移動軌跡在電子文件上進行標記。

本發明的電子文件標記方法，包括：在顯示單元顯示電子文件；通過取像單元來獲取使用者的圖像序列；對圖像序列執行眼動追蹤程序、點頭檢測程序與眨眼檢測程序，其中通過眼動追蹤程序追蹤使用者的眼球的移動軌跡，并通過點頭檢測程序與眨眼檢測程序來檢測使用者是否產生第一特定動作或第二特定動作；在檢測到使用者產生第一特定動作時，通過眼動追蹤程序取得使用者當下的視線落在電子文件的第一位置；執行標記動作，以從第一位置開始并隨著眼球的移動軌跡而在電子文件上進行標記；在檢測到使用者產生第二特定動作時，通過眼動追蹤程序取得使用者當下的視線落在電子文件的第二位置；以及于在第二位置結束標記動作。

本發明的電子文件標記裝置，包括：顯示單元、取像單元、存儲單元以及處理單元。顯示單元用以顯示電子文件。取像單元用以獲取使用者的圖像序列。存儲單元用以存儲電子文件與圖像序列。處理單元耦接至顯示單元、取像單元以及存儲單元，其用以執行眼動追蹤模塊、點頭檢測模塊與眨眼檢測模塊來分析圖像序列。通過眼動追蹤模塊來追蹤使用者的眼球的移動軌跡，并通過點頭檢測模塊與眨眼檢測模塊來檢測使用者是否產生第一特定動作或第二特定動作。在檢測到使用者產生第一特定動作時，眼動追蹤模塊取得使用者當下的視線落在電子文件的第一位置，并且處理單元啟動標記模塊來執行標記動作，而自從第一位置開始并隨著眼球的移動軌跡而在電子文件上進行標記。在檢測到使用者產生第二特定動作時，眼動追蹤模塊取得使用者當下的視線落在電子文件的第二位置，并且標記模塊于在第二位置結束標記動作。

在本發明的一實施例中，上述裝置還包括：校正模塊。校正模塊依序接收多個校正圖像，其中上述校正圖像分別為使用者觀看顯示單元的多個校正點所獲得。并且，校正模塊依據各校正圖像中的眼部區域的兩個亮點位置，獲得基準校正參數，其中上述兩個亮點位置是在取像單元獲取各校正圖像時所形成。進而，校正模塊基于上述校正圖像而通過透視轉換法來產生坐標轉換矩陣，其中坐標轉換矩陣是用以將眼部區域的坐標位置轉換為顯示單元的坐標位置。

在本發明的一實施例中，上述眼動追蹤模塊檢測圖像序列中的目前圖像的該眼部區域，以獲得在目前圖像中的瞳孔位置；依據目前圖像的眼部區域的兩個亮點位置，獲得比對校正參數；依據基準校正參數與比對校正參數，獲得動態補正參數；依據目前圖像中的上述兩個亮點位置其中之一、瞳孔位置以及動態補正參數，計算眼球移動坐標；利用坐標轉換矩陣，轉換眼球移動坐標為對應于顯示單元的視線落點坐標；以及記錄視線落點坐標。

在本發明的一實施例中，上述第一特定動作與第二特定動作各自包括點頭動作與眨眼動作至少其中之一，而第二特定動作與第一特定作動為相同或不相同。上述標記動作包括調整亮度、添加底線及添加底色至少其中之一。

在本發明的一實施例中，上述電子文件包括多個片段，而標記模塊可依據各片段的觀看頻率，對各片段執行對應的標記動作。

基于上述，通過點頭動作或眨眼動作，并隨著眼球的移動軌跡在電子文件上進行標記。據此，利用眼動追蹤，使用者不需手動即可進行對應的操作，相當便利。

為讓本發明的上述特征和優點能更明顯易懂，下文特舉實施例，并配合附圖詳細說明如下。

附圖說明

圖1是依照本發明一實施例的電子文件標記裝置的方塊圖；

圖2是依照本發明一實施例的存儲單元的方塊圖；

圖3是依照本發明一實施例的眼部區域的示意圖；

圖4是依照本發明一實施例的眼部物件的示意圖；

圖5是依照本發明一實施例的電子文件標記方法的流程圖；