[發明專利]擴展現實設備及其交互方法

有效

• 申請號: 202011164687.4
• 申請日: 2020-10-27
• 公開（公告）號: CN112306353B
• 公開（公告）日: 2022-06-24
• 發明（設計）人: 何惠東;張浩;陳麗莉;韓鵬;石娟娟;姜倩文;杜偉華
• 申請（專利權）人: 北京京東方光電科技有限公司;京東方科技集團股份有限公司
• 主分類號: G06F3/0488
• 分類號: G06F3/0488;G06T7/33
• 代理公司: 北京正理專利代理有限公司 11257
• 代理人: 付生輝

1.一種擴展現實設備，其特征在于，包括擴展現實顯示設備和觸控交互裝置，所述觸控交互裝置包括處理器和觸控板；

所述處理器，用于提取預存的與所述觸控板的分辨率及形狀匹配的模板圖像的角點，抓取擴展現實顯示設備的顯示圖像并提取所述顯示圖像的角點，根據所述模板圖像的角點和所述顯示圖像的角點進行圖像配準以得到觸控坐標點與顯示坐標點的映射關系，在所述觸控板接收到觸控操作后將所述觸控操作的觸控坐標根據所述映射關系轉換為顯示坐標并將所述顯示坐標發送至所述擴展現實顯示設備；所述處理器，用于提取所述顯示圖像的角點包括：基于局部熵的角點提取算法提取所述顯示圖像的角點；

所述處理器，用于基于局部熵的角點提取算法提取所述顯示圖像的角點包括：

計算得到所述顯示圖像的局部熵灰度圖；

基于所述局部熵灰度圖，采用SUSAN角點檢測算法檢測得到所述顯示圖像的角點。

2.根據權利要求1所述的擴展現實設備，其特征在于，所述模板圖像的底色呈純色且角點位置呈與底色相異的顏色。

3.根據權利要求1所述的擴展現實設備，其特征在于，所述處理器，還用于檢測所述擴展現實顯示設備的設備識別號，在所述設備識別號發生變化時重新抓取擴展現實顯示設備的顯示圖像并提取所述顯示圖像的角點，根據所述模板圖像的角點和所述顯示圖像的角點進行圖像配準以得到觸控坐標點與顯示坐標點的映射關系。

4.根據權利要求1所述的擴展現實設備，其特征在于，所述模板圖像預存于所述觸控板的固件中，所述處理器還用于將所述映射關系存儲與所述觸控板的驅動寄存器中。

5.根據權利要求1所述的擴展現實設備，其特征在于，所述處理器還用于在所述觸控板一位置受到的壓力大于第一預設閾值且所述壓力的持續時長大于第二預設閾值時判定所述位置接收到單擊操作。

6.一種擴展現實設備的交互方法，所述擴展現實設備包括擴展現實顯示設備和觸控交互裝置，所述觸控交互裝置包括觸控板，其特征在于，所述交互方法包括：

提取預存的與觸控板的分辨率及形狀匹配的模板圖像的角點，抓取擴展現實顯示設備的顯示圖像并提取所述顯示圖像的角點；

根據所述模板圖像的角點和所述顯示圖像的角點進行圖像配準以得到觸控坐標點與顯示坐標點的映射關系；

在所述觸控板接收到觸控操作后將所述觸控操作的觸控坐標根據所述映射關系轉換為顯示坐標并將所述顯示坐標發送至所述擴展現實顯示設備；

所述提取所述顯示圖像的角點包括：基于局部熵的角點提取算法提取所述顯示圖像的角點；

所述基于局部熵的角點提取算法提取所述顯示圖像的角點包括：

計算得到所述顯示圖像的局部熵灰度圖；

基于所述局部熵灰度圖，采用SUSAN角點檢測算法檢測得到所述顯示圖像的角點。

7.根據權利要求6所述的交互方法，其特征在于，所述模板圖像的底色呈純色且角點位置呈與底色相異的顏色。

8.根據權利要求6所述的交互方法，其特征在于，所述交互方法還包括：

檢測所述擴展現實顯示設備的設備識別號，在所述設備識別號發生變化時重新抓取擴展現實顯示設備的顯示圖像并提取所述顯示圖像的角點，根據所述模板圖像的角點和所述顯示圖像的角點進行圖像配準以得到觸控坐標點與顯示坐標點的映射關系。