[發明專利]一種基于增強現實的工業內窺影像實現方法及系統

在審

• 申請號: 202011059099.4
• 申請日: 2020-09-30
• 公開（公告）號: CN112132944A
• 公開（公告）日: 2020-12-25
• 發明（設計）人: 程獲方;袁浩;胡楠;潘媛;朱璽
• 申請（專利權）人: 湖南能創科技有限責任公司;華自科技股份有限公司
• 主分類號: G06T15/04
• 分類號: G06T15/04;G06T17/10;G06T19/00;G06T19/20
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 劉奕

1.一種基于增強現實的工業內窺影像實現方法，其特征在于，應用于工業內窺影像實現系統，所述工業內窺影像實現系統包括內窺鏡探頭和可穿戴設備，所述內窺鏡探頭和所述可穿戴設備通信連接，所述內窺鏡探頭上設置有第一深度攝像頭和第一定位傳感器，所述可穿戴設備上設置有第二定位傳感器、圖像處理模塊和顯示模塊；所述方法包括：

調用所述第一深度攝像頭采集目標內部結構場景，得到所述目標內部結構場景的三維信息；

調用所述第一定位傳感器定位所述內窺鏡探頭的位置；

調用所述第二定位傳感器定位所述可穿戴設備的位置；

通過所述圖像處理模塊根據所述目標內部結構場景的三維信息獲取所述目標內部結構場景的三維模型，以及根據所述內窺鏡探頭的位置與所述可穿戴設備的位置獲取所述目標內部結構場景的三維模型在所述顯示模塊上的待顯示位置；

通過所述顯示模塊在所述待顯示位置顯示所述目標內部結構場景的三維模型。

2.根據權利要求1所述的基于增強現實的工業內窺影像實現方法，其特征在于，所述可穿戴設備上還設置有第二深度攝像頭；所述方法還包括：

調用所述第二深度攝像頭采集目標空間環境場景，得到所述目標空間環境場景的三維信息；

通過所述圖像處理模塊根據所述目標空間環境場景的三維信息獲取所述目標空間環境場景的三維模型，并與所述目標內部結構場景的三維模型建立映射關系。

3.根據權利要求2所述的基于增強現實的工業內窺影像實現方法，其特征在于，所述內窺鏡探頭上還設置有色彩攝像頭；所述方法還包括：

調用所述色彩攝像頭采集目標內部顏色信息，得到所述目標內部貼圖數據；

通過所述圖像處理模塊根據所述目標內部貼圖數據，獲取疊加所述目標內部貼圖數據的所述目標內部結構場景的三維模型；

通過所述顯示模塊在所述待顯示位置顯示疊加所述目標內部貼圖數據的所述目標內部結構場景的三維模型。

4.根據權利要求3所述的基于增強現實的工業內窺影像實現方法，其特征在于，所述可穿戴設備上還設置有存儲模塊；所述方法還包括：

通過所述存儲模塊存儲所述目標內部貼圖數據、所述目標內部結構場景的三維模型、所述目標空間環境場景的三維模型和所述映射關系。

5.根據權利要求1至4任意一項所述的基于增強現實的工業內窺影像實現方法，其特征在于，所述可穿戴設備上還設置有運動檢測模塊，所述內窺鏡探頭上還設置有位置調節模塊；所述方法還包括：

調用所述運動檢測模塊檢測所述可穿戴設備的轉動角度；

通過所述位置調節模塊根據所述可穿戴設備的轉動角度帶動所述內窺鏡探頭轉動相應角度。

6.一種基于增強現實的工業內窺影像實現系統，其特征在于，包括內窺鏡探頭和可穿戴設備，所述內窺鏡探頭和所述可穿戴設備通信連接，所述內窺鏡探頭上設置有第一深度攝像頭和第一定位傳感器，所述可穿戴設備上設置有第二定位傳感器、圖像處理模塊和顯示模塊；

所述第一深度攝像頭用于采集目標內部結構場景，得到所述目標內部結構場景的三維信息；

所述第一定位傳感器用于定位所述內窺鏡探頭的位置；

所述第二定位傳感器用于定位所述可穿戴設備的位置；

所述圖像處理模塊用于根據所述目標內部結構場景的三維信息獲取所述目標內部結構場景的三維模型，以及根據所述內窺鏡探頭的位置與所述可穿戴設備的位置獲取所述目標內部結構場景的三維模型在所述顯示模塊上的待顯示位置；

所述顯示模塊用于在所述待顯示位置顯示所述目標內部結構場景的三維模型。

7.根據權利要求6所述的基于增強現實的工業內窺影像實現系統，其特征在于，所述可穿戴設備上還設置有第二深度攝像頭；

所述第二深度攝像頭用于采集目標空間環境場景，得到所述目標空間環境場景的三維信息；

所述圖像處理模塊還用于根據所述目標空間環境場景的三維信息獲取所述目標空間環境場景的三維模型，并與所述目標內部結構場景的三維模型建立映射關系。