[發明專利]一種基于增強現實的遠程指導的方法與設備

在審

• 申請號: 201910939796.X
• 申請日: 2019-09-30
• 公開（公告）號: CN110751735A
• 公開（公告）日: 2020-02-04
• 發明（設計）人: 廖春元;胡軍
• 申請（專利權）人: 亮風臺(上海)信息科技有限公司
• 主分類號: G06T19/00
• 分類號: G06T19/00;G06T17/00
• 代理公司: 31230 上海三和萬國知識產權代理事務所(普通合伙)
• 代理人: 周建華

1.一種基于增強現實的遠程指導的方法，應用于第一用戶設備，其中，所述方法包括：

獲取并存儲第二用戶的當前操作對象的三維對象模型，其中，所述第二用戶根據第一用戶的指導對所述當前操作對象執行操作；

響應于基于所述三維對象模型進行指導的觸發事件，通過所述第一用戶設備呈現所述三維對象模型；

響應于所述第一用戶基于所述三維對象模型的指導操作，生成所述指導操作對應的指導信息；

將所述指導信息發送至所述第二用戶所使用的增強現實設備。

2.根據權利要求1所述的方法，其中，所述獲取并存儲第二用戶的當前操作對象的三維對象模型，包括：

接收并存儲網絡設備或第二用戶發送的、第二用戶的當前操作對象的三維對象模型。

3.根據權利要求1所述的方法，其中，所述獲取并存儲第二用戶的當前操作對象的三維對象模型，包括：

接收所述第二用戶或網絡設備發送的三維重建信息，其中，所述三維重建信息用于對所述第二用戶的當前操作對象進行三維重建；

根據所述三維重建信息，生成并存儲所述第二用戶的當前操作對象的三維對象模型。

4.根據權利要求1所述的方法，其中，所述觸發事件包括以下至少一項：

所述第一用戶與所述第二用戶之間的當前網絡條件不滿足預定的視頻通信所需要的網絡條件；

所述第一用戶發出用于呈現所述三維對象模型的第一呈現指令；

接收所述第二用戶發送的用于呈現所述三維對象模型的第二呈現指令；

所述第一用戶與所述第二用戶之間建立通信連接；

所述第一用戶獲取所述第二用戶的當前操作對象的三維對象模型。

5.根據權利要求1至4中任一項所述的方法，其中，所述第一用戶觀看所述三維對象模型的視角信息與所述第二用戶觀看所述當前操作對象的視角信息保持同步；

其中，所述方法還包括：

接收所述第二用戶發送的調整視角指令，其中，所述調整視角指令包括所述第二用戶所使用的增強現實設備的實時位姿信息；

根據所述實時位姿信息，調整所述第一用戶觀看所述三維對象模型的視角信息。

6.根據權利要求5所述的方法，其中，所述指導信息包括所述指導操作對應的指導位置，或者，所述指導信息包括所述指導位置和所述指導操作對應的指導內容。

7.根據權利要求1至4中任一項所述的方法，其中，所述第一用戶觀看所述三維對象模型的視角信息與所述第二用戶觀看所述當前操作對象的視角信息相互獨立，所述指導信息包括所述指導操作對應的指導位置在所述三維對象模型中的模型坐標，或者，所述指導信息包括所述指導位置在所述三維對象模型中的模型坐標和所述指導操作對應的指導內容。

8.根據權利要求7所述的方法，其中，所述三維對象模型疊加顯示在所述第一用戶的當前場景中的固定位置；

其中，所述方法還包括：

響應于所述第一用戶的調整位姿信息的操作，獲取所述第一用戶設備的實時位姿信息；

根據所述實時位姿信息，調整所述第一用戶觀看所述三維對象模型的視角信息。

9.根據權利要求8所述的方法，其中，所述生成所述指導操作對應的指導信息，包括：

根據所述第一用戶設備的實時位姿信息以及所述指導位置，確定所述指導位置對應的世界坐標；

根據所述指導位置對應的世界坐標，確定所述指導位置在所述三維對象模型中的模型坐標；

根據所述指導位置在所述三維對象模型中的模型坐標，生成所述指導操作對應的指導信息。

10.根據權利要求7所述的方法，其中，所述三維對象模型基于三維渲染引擎顯示在所述第一用戶設備的屏幕中；

其中，所述方法還包括：

響應于所述第一用戶的調整所述三維對象模型在所述第一用戶設備的屏幕中的顯示信息的操作，調整所述第一用戶觀看所述三維對象模型的視角信息。