[發明專利]使用增強現實的空間定位

在審

• 申請號: 202011182307.X
• 申請日: 2020-10-29
• 公開（公告）號: CN112748400A
• 公開（公告）日: 2021-05-04
• 發明（設計）人: 保羅·安謝塔·達席爾瓦;加布里埃爾·德·奧利維拉·克魯茲·多普拉多;法比奧·密特蘇黑科·斯莫木拉;安德里·科吉·富基莫特·塔姆巴;格勞庫·溫貝托·戈梅斯;凱爾森·路易斯·德·奧利維拉·佩雷拉;弗拉維奧·索勒斯·里貝羅朱尼爾;法比奧·布里托·德·卡瓦略·阿爾梅迪亞;英格麗德·溫克勒;瓦萊里婭·洛雷羅·達席爾瓦
• 申請（專利權）人: 埃姆普里薩有限公司;巴西國家工業培訓服務中心巴伊亞地區部
• 主分類號: G01S5/22
• 分類號: G01S5/22;G06F3/01;G06T19/00
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 穆森;戚傳江

本發明涉及使用增強現實的空間定位。用于使用增強現實內容、以網格拓撲配置的超聲設備陣列以及深度學習來定位關于飛機的事件的方法和系統。

相關申請的交叉引用

無

關于聯邦政府贊助的研究或開發的聲明

無

技術領域

本文的非限制性技術涉及使用超聲傳感器網絡(本文中稱為“超聲”)以自動地檢測在具有包括移動設備的增強現實(本文稱為“AR”)的室內環境中的用戶位置坐標，使得用戶能夠實時地接收位置信息；以及以改善飛機維護過程為目的，使用深度學習(本文稱為“DL”)方法，指導技術人員快速地定位在維護期間需要訪問的元件，具有準確性和精度。在一些其他方面中，本文的技術涉及使用超聲來定位和導航環境的方法和系統，在一些實施例中，結合深度學習/人工智能圖像模式識別，以幫助用戶使用顯示設備上的增強現實內容。

背景技術

當前，航空維護業務在獲得維護技術人員執行其所需任務方面面臨困難。在許多情況下，技術人員對需要維護的飛機知識不足，這導致維護任務的成本更高，因為可能花費更長的時間或需要一名以上的機械師來執行該任務。

為了執行維護任務，機械師通常必須首先檢查是否有關于需要一些維護動作的飛機的任何可用信息。如果沒有關于需要維護的飛機的高級信息，那么機械師應當檢查飛機的飛行日志，以查看是否有待執行的任何未決維護。對于飛機有問題的情況，第一種方法是嘗試糾正問題。在問題不簡單的情況下，可以通過使用最小設備清單(MEL)來驗證活動的派發，該清單用于確定飛機的持續適航性。如果有故障的設備未出現在MEL中，則有必要執行故障排除，即，通過系統地搜索組件問題的根本原因或其替換來嘗試解決問題。

通常必須執行該故障排除過程，直到該問題被解決并且飛機可以再次可操作為止。如果飛機出現問題，其中，機械師必須執行維護過程，除了獲得執行該活動所需的零件、設備和材料外，還有必要知道飛機上可能發生故障或需要注意的特定組件的位置。必要的維護信息可以在飛機維護手冊中找到(維護手冊可以包含例如拆卸/安裝過程、故障排除、激活/停用等)，并且可以經由打印文檔和/或數字文件由機械師訪問。機械師通常必須遵循飛機維護手冊中概述的所有維護步驟，以確保設備的正確維護。

根據以上所述，需要關于飛機的先驗知識變得顯而易見，以便快速地定位和維護將需要維護的組件。在許多情況下，不容易找到需要定位的組件，因為它們可能被隱藏在飛機的其他組件(諸如面板罩)內、旁邊或后面。越快找到維護位置，就能越快啟動維護活動。

可以通過在設備和機械師之間耦合地理定位系統來降低定位組件的難度。地理定位被用于許多不同目的，例如：用于未知環境中的導航、定位對象和標識地點等。然而，沒有同時適合于在室內和室外環境中，呈現高定位精度的飛機維護的技術。即，沒有用于這種目的的可靠、有效和高效的解決方案。

當前，有許多允許定位的技術。在大多數情況下，所使用的解決方案都是基于GPS系統，該系統提供高精度的絕對位置地理坐標。但是，GPS在室內或障礙物下方(諸如飛機貨艙或飛機機身下)使用時有局限性。為了使GPS正常工作，接收器需要位于GPS衛星的視線范圍內。因此，為了克服GPS系統的缺陷，在最近的幾十年中，出現了幾種方法，這些方法提出了適用于封閉環境中的位置的硬件和軟件的解決方案。同時，高的位置準確性有助于正確地找到正搜索的物品，并且不會將維護用戶引導到錯誤的位置，從而不會延遲維護任務的執行。

附圖說明

將結合附圖，閱讀示例性非限制性示例性實施例的下述詳細描述，其中：

圖1示出了現有技術的基于AR的系統中的示例性非限制性組件(硬件、軟件、服務器)。

圖2示出了示例非限制性基本AR處理流程的非限制性實施例。

圖3A、3B和3C示出了如何捕獲事件以及以后如何在非限制性技術中使用事件的非限制性示例。