[發明專利]基于VR或AR的圖像數據處理方法、設備和安檢系統

有效

• 申請號: 201611255796.0
• 申請日: 2016-12-29
• 公開（公告）號: CN108268120B
• 公開（公告）日: 2020-07-28
• 發明（設計）人: 趙自然;顧建平;劉必成;王琪;易茜
• 申請（專利權）人: 同方威視技術股份有限公司;清華大學
• 主分類號: G06F3/01
• 分類號: G06F3/01;G01N23/04;G06T15/00
• 代理公司: 中科專利商標代理有限責任公司 11021
• 代理人: 倪斌

公開了一種基于VR或AR的圖像數據處理方法、設備和安檢系統。在一實施例中，一種圖像數據處理方法包括：基于針對內部容納有物體的容器的三維掃描數據，重建容器及其容納的物體的三維圖像；立體顯示重建的三維圖像；基于用戶的定位信息和動作信息確定針對容器中至少一件物體的操縱信息；基于所確定的操縱信息至少重新重建所述至少一件物體的三維圖像；以及在所顯示的三維圖像上展示重新重建的所述至少一件物體。

技術領域

本發明涉及安檢技術領域，尤其涉及一種基于虛擬現實(VR)或增強現實(AR)技術的圖像數據處理設備和安檢系統。

背景技術

隨著集裝箱運輸業務的快速發展，越來越多貨物通過集裝箱進行裝卸和運輸。而由于集裝箱內貨物的隱蔽性，給托運人瞞報危險品和走私品帶來了可乘之機。雖然類似X射線透射系統的檢查手段給集裝箱的安全運輸工作帶來了很大便利，但僅靠看圖員的經驗獲取貨物信息工作量大，易疲勞。另一方面，實際檢查時仍有一定比例的集裝箱要求開箱檢查，而集裝箱的開箱檢查存在諸多困難。例如，集裝箱常用于運輸大型物體，開箱檢查搬運過程復雜且危險。又如，集裝箱內貨物排列較緊密，開箱檢查完成后再裝箱存在一定困難。再如，開箱檢查手續復雜，耗時長，延長了貨運時間。此外，對于瞞報危險品的集裝箱，直接現場開箱檢查，還威脅著檢查員的人身安全。

發明內容

本公開的目的至少部分地在于提供一種基于虛擬現實(VirtualReality，VR)或增強現實(Augmented Reality，AR)技術的圖像數據處理方法、設備和安檢系統。

根據本公開的一個方面，提供了一種圖像數據處理方法，包括：基于針對內部容納有物體的容器的三維掃描數據，重建容器及其容納的物體的三維圖像；立體顯示重建的三維圖像；基于用戶的定位信息和動作信息確定針對容器中至少一件物體的操縱信息；基于所確定的操縱信息至少重新重建所述至少一件物體的三維圖像；以及在所顯示的三維圖像上展示重新重建的所述至少一件物體。

根據本公開的另一方面，提供了一種圖像數據處理設備，包括：通信接口，配置為接收內部容納有物體的容器的三維掃描數據；以及處理器，配置為基于接收到的三維掃描數據，重建容器及其容納的物體的三維圖像以便顯示；其中，通信接口還配置為接收用戶的定位信息和動作信息，處理器還配置為基于接收到的定位信息和動作信息確定針對容器中至少一件物體的操縱信息，并基于所確定的操縱信息至少重新重建所述至少一件物體的三維圖像。

根據本公開的再一方面，提供了一種安檢系統，包括：三維掃描設備，配置為對內部容納有物體的容器進行三維掃描，以生成三維掃描數據；位置跟蹤設備，配置為定位用戶的位置，以便提供用戶的定位信息；運動跟蹤設備，配置為確定用戶的運動，以便提供用戶的動作信息；如權利要求7-12中任一項所述的圖像數據處理設備；以及立體顯示器，配置為顯示重建的三維圖像。

根據本公開的又一方面，提供了一種計算機可讀記錄介質，其上存儲有可執行指令，所述指令在由一個或多個處理器執行時，使所述一個或多個處理器執行以下操作：基于針對內部容納有物體的容器的三維掃描數據，重建容器及其容納的物體的三維圖像；立體顯示重建的三維圖像；基于用戶的定位信息和動作信息確定針對容器中至少一件物體的操縱信息；基于所確定的操縱信息至少重新重建所述至少一件物體的三維圖像；以及在所顯示的三維圖像上展示重新重建的所述至少一件物體。

三維掃描數據例如包括X射線斷層(X-CT)掃描數據、多視角X射線掃描數據中至少之一。這些數據例如可以通過X-CT掃描設備、多視角X射線掃描設備等三維掃描設備來獲得。

可以基于三維掃描數據，確定所述至少一個物體的結構和材料特性中至少之一。所確定的結構和材料特性中至少之一可以顯示于所述至少一個物體周圍。

用于顯示三維圖像和各種其他信息的顯示器可以是立體顯示器，例如頭盔式、眼鏡式、桌面式、投影式、手持式或自由立體顯示式立體顯示器。