[發明專利]基于視覺感知的人機交互實現方法和裝置

在審

• 申請號: 201710972959.5
• 申請日: 2017-10-18
• 公開（公告）號: CN109683700A
• 公開（公告）日: 2019-04-26
• 發明（設計）人: 李煒;孫其民
• 申請（專利權）人: 深圳市掌網科技股份有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06T19/00
• 代理公司: 深圳翼盛智成知識產權事務所(普通合伙) 44300
• 代理人: 黃威

本申請實施例公開了一種基于視覺感知的人機交互實現方法和裝置。該人機交互實現方法，通過在真實環境中顯示虛擬物體，基于視覺感知判斷目標用戶的多個手指與虛擬物體是否發生碰撞，若發生碰撞，則獲取目標用戶的多個手指相對于虛擬物體的多個方位變化信息，基于預設算法模型對多個方位變化信息進行處理，得到抓取參數值，判斷抓取參數值是否大于預設閾值，若大于，則根據多個手指的運動信息，調整虛擬物體在真實環境中的顯示狀態，以輸出增強現實的顯示畫面。該方案基于人的視覺感知習慣實現虛擬物體與真實場景的融合，使得用戶能在無需提示的情況下抓取虛擬物體，增加了虛擬物體與真實場景之間在視覺感知上的契合度，提升了人機交互的真實性。

技術領域

本申請涉及增強現實技術領域，尤其涉及一種基于視覺感知的人機交互實現方法和裝置。

背景技術

AR(Augmented Reality，增強現實)是一種將真實世界信息和虛擬世界信息“無縫”集成的新技術，是把原本在現實世界的一定時間空間范圍內很難體驗到的實體信息(視覺信息、聲音、味道、觸覺等)通過電腦等科學技術，模擬仿真后，把真實的環境和虛擬的物體實時地疊加到了同一個畫面或空間同時存在，將虛擬的信息應用到真實世界，被人類感官所感知，從而達到超越現實的感官體驗。增強現實技術，不僅展現了真實世界的信息，而且將虛擬的信息同時顯示出來，兩種信息充、疊加。

相關技術中，可通過傳感技術將虛擬對象準確地“放置”在真實環境中，借助顯示設備將虛擬對象與真實環境融為一體，使得伸出其中的用戶可以更加自然的方式與環境中的真實物體及虛擬物體進行三維實時交互。

發明內容

本申請實施例提供一種基于視覺感知的人機交互實現方法和裝置，提升了虛擬物體與真實場景之間在視覺感知上的契合度。

本申請實施例提供了一種基于視覺感知的人機交互實現方法，包括：

在真實環境中顯示虛擬物體；

基于視覺感知判斷目標用戶的多個手指與虛擬物體是否發生碰撞；

若是，則獲取目標用戶的多個手指相對于虛擬物體的多個方位變化信息；

基于預設算法模型對所述多個方位變化信息進行處理，得到抓取參數值；

判斷所述抓取參數值是否大于預設閾值；

若大于，則根據所述多個手指的運動信息，調整所述虛擬物體在真實環境中的顯示狀態，以輸出增強現實的顯示畫面。

相應地，本申請實施例還提供一種基于視覺感知的人機交互實現裝置，包括：

顯示模塊，用于在真實環境中顯示虛擬物體；

第一判斷模塊，用于基于視覺感知判斷目標用戶的多個手指與虛擬物體是否發生碰撞；

獲取模塊，用于在第一判斷模塊判定為是時，獲取目標用戶的多個手指相對于虛擬物體的多個方位變化信息；

處理模塊，用于基于預設算法模型對所述多個方位變化信息進行處理，得到抓取參數值；

第二判斷模塊，用于判斷所述抓取參數值是否大于預設閾值；

調整模塊，用于在第二判斷模塊判定為是時，根據所述多個手指的運動信息，調整所述虛擬物體在真實環境中的顯示狀態，以輸出增強現實的顯示畫面。