[發(fā)明專利]一種基于隔空觸摸操作的桌面投影交互方法及系統(tǒng)

在審

• 申請?zhí)枺?/td>: 201810793358.2
• 申請日: 2018-07-18
• 公開（公告）號: CN108920088A
• 公開（公告）日: 2018-11-30
• 發(fā)明（設計）人: 吳琴;王嘉元;王思睿;尹楊茂竹
• 申請（專利權）人: 成都信息工程大學
• 主分類號: G06F3/0488
• 分類號: G06F3/0488
• 代理公司: 北京元本知識產(chǎn)權代理事務所 11308
• 代理人: 常桑

本發(fā)明公開了一種基于隔空觸摸操作的桌面投影交互方法及系統(tǒng)，所述方法包括：獲取隔空觸摸操作界面所對應的位置跟蹤數(shù)據(jù)；依據(jù)所述位置跟蹤數(shù)據(jù)投影出對應的隔空觸摸操作界面；獲取用戶在隔空觸摸操作界面上進行操作時的指尖跟蹤數(shù)據(jù)并判斷是否存在點擊操作；是則進行交互效果渲染。系統(tǒng)包括：數(shù)據(jù)輸出單元，其能夠獲取隔空觸摸操作界面所對應的位置跟蹤數(shù)據(jù)；數(shù)據(jù)投影單元，其能夠對依據(jù)所述位置跟蹤數(shù)據(jù)投影出對應的隔空觸摸操作界面；數(shù)據(jù)處理單元，其能夠獲取用戶在隔空觸摸操作界面上進行操作時的指尖跟蹤數(shù)據(jù)并判斷是否存在點擊操作，是則進行交互效果渲染。本發(fā)明提供的投影交互的新媒體技術具有交互方式多樣化，交互靈敏性極高的特點。

技術領域

本發(fā)明涉及數(shù)字媒體技術領域，具體的說是涉及一種基于隔空觸摸操作的 桌面投影交互方法及系統(tǒng)。

背景技術

在新媒體行業(yè)中，投影觸控技術得到了廣泛的應用，利用手指在指定的表 面進行觸控操作，由投影儀反饋互動效果。但是現(xiàn)有投影觸控技術多基于固定 的場景，即操作均在墻面，地板上實現(xiàn)或是作為已經(jīng)組裝完成的裝置在其自備 的硬件上進行交互；且無法使投影畫面跟隨載體移動選擇，也無法實現(xiàn)在立體 空間中進行隔空交互。總而言之這類基于固定場景的做法，首先限制了使用者 的使用環(huán)境，增加了技術的投放難度，導致使用者操作的不方便，其次也增加 了需要設置并隱藏的傳感器。

發(fā)明內(nèi)容

鑒于已有技術存在的缺陷，本發(fā)明的目的是要提供一種基于隔空觸摸操作 的桌面投影交互方法，以實現(xiàn)投影追蹤紙面和依賴深度信息定位指尖的新型隔 空觸摸桌面投影技術且同時解決現(xiàn)有技術中無法實現(xiàn)投影追蹤載體和缺少對深 度信息追蹤的現(xiàn)狀。

為了實現(xiàn)上述目的，本發(fā)明的技術方案：一種基于隔空觸摸操作的桌面投 影交互方法，包括以下步驟：

S1、獲取隔空觸摸操作界面所對應的位置跟蹤數(shù)據(jù)；

S2、依據(jù)所述位置跟蹤數(shù)據(jù)投影出對應的隔空觸摸操作界面；

S3、獲取用戶在隔空觸摸操作界面上進行操作時的指尖跟蹤數(shù)據(jù)并判斷是 否存在點擊操作；

S4、是則進行交互效果渲染。

所述S1包括如下步驟：

S11、獲取承載所述隔空觸摸操作界面的交互載體的圖像數(shù)據(jù)；

S12、計算所述交互載體的旋轉角度以及位置以獲取對應的位置跟蹤數(shù)據(jù)。

所述S12包括如下步驟：

S121、對所述圖像數(shù)據(jù)進行鏡面翻轉處理；

S122、搜索鏡面翻轉后圖像的特征點；

S123、計算每一特征點的特征矢量并獲取隔空觸摸操作界面的各個界面角 點的旋轉量以及位置。

所述S3包括如下步驟：

S31、獲取用戶在隔空觸摸操作界面上進行操作時的操作圖像；

S32、獲取所述操作圖像的圖像深度信息；

S33、對所述操作圖像進行初步降噪獲取圖像興趣區(qū)域，以標記出手指指尖 所對應的圖像區(qū)域；

S34、對所述操作圖像進行二次降噪確定手指指尖位置。

所述S3還包括如下步驟：

S35、通過比較桌面高度與指尖高度的差值是否小于閾值判斷是否存在點擊 操作。

本發(fā)明還要提供一種基于隔空觸摸操作的桌面投影交互系統(tǒng)，其特征在于： 包括

數(shù)據(jù)輸出單元，該數(shù)據(jù)輸出單元能夠獲取隔空觸摸操作界面所對應的位置 跟蹤數(shù)據(jù)；