[發明專利]利用手持終端進行光標定位的方法、手持終端和電子設備

在審

• 申請號: 201780002600.3
• 申請日: 2017-04-28
• 公開（公告）號: CN108235749A
• 公開（公告）日: 2018-06-29
• 發明（設計）人: 王長海;馬維金
• 申請（專利權）人: 王長海
• 主分類號: G06F3/0481
• 分類號: G06F3/0481;G06F3/0487
• 代理公司: 北京成創同維知識產權代理有限公司 11449
• 代理人: 蔡純;張靖琳

一種利用手持終端進行光標定位的方法、手持終端和電子設備(300)。所述手持終端上設置有攝像頭(202)，所述方法包括：接收電子設備(300)的顯示屏(100)上當前播放的視頻圖像(21)作為參考圖像(10)，并通過所述攝像頭(202)拍攝采集圖像(20)(Sll)，所述采集圖像(20)內包含所述電子設備(300)的顯示屏(100)上當前播放的視頻圖像(21)的部分或全部；根據所述采集圖像(20)和所述參考圖像(10)構建變換矩陣(S12)；以及根據所述變換矩陣，將所述采集圖像(20)中的一點轉換為顯示屏(100)的光標位置(12)(S13)。所述方法實現了通過圖像技術實現光標定位功能。

技術領域

本公開涉及界面交互技術，具體涉及利用成像設備實現在屏幕上定位的方法和裝置。

背景技術

隨著人機交互技術的不斷發展，和電子設備例如計算機、電視機等設備的交互手段已不再依賴鼠標輸入。目前，利用成像設備來實現人機交互輸入的技術越來越具有實踐價值。例如，現有技術提供了一種利用圖像定位的方法，通過在電視周圍環境中布置特定圖案，或者在屏幕上顯示特定圖案，憑借這些圖案，在攝像頭采集的圖像中定位屏幕的位置，計算攝像頭與屏幕的投影關系，繼而定位光標位置。

但該方法需要在環境中布置圖案，增加了用戶的使用門檻，而在屏幕中顯示特定圖案又會干擾用戶的正常顯示。

發明內容

有鑒于此，本公開提出一種易于使用的方案，不用對周圍環境做特別的設置，或者改變現實的內容，僅使用界面上顯示的參考圖像，就定位參考圖像在采集圖像中位置，實現直觀的光標坐標控制。

根據本公開的第一方面，提供一種利用手持終端進行光標定位的方法，所述手持終端上設置有攝像頭，包括：

通過所述攝像頭拍攝采集圖像，所述采集圖像內包含所述電子設備的顯示屏上當前播放的視頻圖像的部分或全部；

接收電子設備的顯示屏上當前播放的視頻圖像作為參考圖像；

根據所述采集圖像和所述參考圖像構建變換矩陣；以及

根據所述變換矩陣，將所述采集圖像中的一點轉換為顯示屏的光標位置。

優選地，所述采集圖像中的一點為固定點。

優選地，將所述固定點為所述采集圖像的中心點。

優選地，所述采集圖像中的一點為浮動點。

優選地，將所述采集圖像的中心點和目標圖像的中心點連接成直線，選取所述直線上的一點作為所述浮動點，其中，將所述采集圖像中包含的所述顯示屏當前播放的視頻圖像的部分或全部作為目標圖像。

優選地，所述方法還包括：從所述攝像拍攝的多張采集圖像中選擇和所述參考圖像具有相同的時間戳的采集圖像作為第一采集圖像；

則所述根據所述采集圖像和所述參考圖像構建變換矩陣包括：

以所述第一采集圖像和所述參考圖像構建變換矩陣。

優選地，所述根據所述采集圖像和所述參考圖像構建變換矩陣包括：

以所述電子終端的顯示屏構建參考坐標系，以所述采集圖像所在的成像平面構建攝像頭坐標系；

采用ASIFT算法獲取所述采集圖像和所述參考圖像在各自的坐標系內的匹配的特征點，其中，所述特征點大于4組，且不在一條直線上；以及

根據所述匹配的特征點構建所述變換矩陣。

優選地，所述手持設備為遙控器、移動電話或PAD，所述電子設備為電視機或計算機。

根據本公開的第二方面，提供一種手持終端，所述手持終端上設置有攝像頭，包括：