[發明專利]一種基于隔空觸摸操作的桌面投影交互方法及系統

在審

• 申請號: 201810793358.2
• 申請日: 2018-07-18
• 公開（公告）號: CN108920088A
• 公開（公告）日: 2018-11-30
• 發明（設計）人: 吳琴;王嘉元;王思睿;尹楊茂竹
• 申請（專利權）人: 成都信息工程大學
• 主分類號: G06F3/0488
• 分類號: G06F3/0488
• 代理公司: 北京元本知識產權代理事務所 11308
• 代理人: 常桑

本發明公開了一種基于隔空觸摸操作的桌面投影交互方法及系統，所述方法包括：獲取隔空觸摸操作界面所對應的位置跟蹤數據；依據所述位置跟蹤數據投影出對應的隔空觸摸操作界面；獲取用戶在隔空觸摸操作界面上進行操作時的指尖跟蹤數據并判斷是否存在點擊操作；是則進行交互效果渲染。系統包括：數據輸出單元，其能夠獲取隔空觸摸操作界面所對應的位置跟蹤數據；數據投影單元，其能夠對依據所述位置跟蹤數據投影出對應的隔空觸摸操作界面；數據處理單元，其能夠獲取用戶在隔空觸摸操作界面上進行操作時的指尖跟蹤數據并判斷是否存在點擊操作，是則進行交互效果渲染。本發明提供的投影交互的新媒體技術具有交互方式多樣化，交互靈敏性極高的特點。

技術領域

本發明涉及數字媒體技術領域，具體的說是涉及一種基于隔空觸摸操作的 桌面投影交互方法及系統。

背景技術

在新媒體行業中，投影觸控技術得到了廣泛的應用，利用手指在指定的表 面進行觸控操作，由投影儀反饋互動效果。但是現有投影觸控技術多基于固定 的場景，即操作均在墻面，地板上實現或是作為已經組裝完成的裝置在其自備 的硬件上進行交互；且無法使投影畫面跟隨載體移動選擇，也無法實現在立體 空間中進行隔空交互。總而言之這類基于固定場景的做法，首先限制了使用者 的使用環境，增加了技術的投放難度，導致使用者操作的不方便，其次也增加 了需要設置并隱藏的傳感器。

發明內容

鑒于已有技術存在的缺陷，本發明的目的是要提供一種基于隔空觸摸操作 的桌面投影交互方法，以實現投影追蹤紙面和依賴深度信息定位指尖的新型隔 空觸摸桌面投影技術且同時解決現有技術中無法實現投影追蹤載體和缺少對深 度信息追蹤的現狀。

為了實現上述目的，本發明的技術方案：一種基于隔空觸摸操作的桌面投 影交互方法，包括以下步驟：

S1、獲取隔空觸摸操作界面所對應的位置跟蹤數據；

S2、依據所述位置跟蹤數據投影出對應的隔空觸摸操作界面；

S3、獲取用戶在隔空觸摸操作界面上進行操作時的指尖跟蹤數據并判斷是 否存在點擊操作；

S4、是則進行交互效果渲染。

所述S1包括如下步驟：

S11、獲取承載所述隔空觸摸操作界面的交互載體的圖像數據；

S12、計算所述交互載體的旋轉角度以及位置以獲取對應的位置跟蹤數據。

所述S12包括如下步驟：

S121、對所述圖像數據進行鏡面翻轉處理；

S122、搜索鏡面翻轉后圖像的特征點；

S123、計算每一特征點的特征矢量并獲取隔空觸摸操作界面的各個界面角 點的旋轉量以及位置。

所述S3包括如下步驟：

S31、獲取用戶在隔空觸摸操作界面上進行操作時的操作圖像；

S32、獲取所述操作圖像的圖像深度信息；

S33、對所述操作圖像進行初步降噪獲取圖像興趣區域，以標記出手指指尖 所對應的圖像區域；

S34、對所述操作圖像進行二次降噪確定手指指尖位置。

所述S3還包括如下步驟：

S35、通過比較桌面高度與指尖高度的差值是否小于閾值判斷是否存在點擊 操作。

本發明還要提供一種基于隔空觸摸操作的桌面投影交互系統，其特征在于： 包括

數據輸出單元，該數據輸出單元能夠獲取隔空觸摸操作界面所對應的位置 跟蹤數據；