[發明專利]通信系統

有效

• 申請號: 201680048399.8
• 申請日: 2016-08-19
• 公開（公告）號: CN107924589B
• 公開（公告）日: 2021-06-01
• 發明（設計）人: H·Y-T·陳;B·V·泰勒;M·R·斯威夫特;A·S·李;R·S·梅內澤斯;J·T·福爾克納
• 申請（專利權）人: 微軟技術許可有限責任公司
• 主分類號: G06T19/00
• 分類號: G06T19/00;H04N7/15
• 代理公司: 永新專利商標代理有限公司 72002
• 代理人: 劉瑜;王英

1.一種用戶設備，包括：

網絡接口，被配置為經由網絡從另一設備接收視頻信號；

渲染模塊，被配置為控制所述用戶設備的顯示裝置以向所述用戶設備的用戶提供其環境的真實世界視圖并且通過顯示虛擬增強元素使得其與所述真實世界視圖同時可見而使視覺場景可見，所述虛擬增強元素包括從所述視頻信號得出的視頻圖像；以及

場景修改模塊，被配置為生成用于在所述另一設備處顯示所述用戶感知到的所述視覺場景的表示的渲染數據，包括所述虛擬增強元素的修改版本，其中，所述修改版本不包括所述視頻圖像，其中，所述網絡接口被配置為經由網絡向所述另一設備發送所述渲染數據。

2.根據權利要求1所述的用戶設備，其中，所述虛擬增強元素是由所述渲染模塊在用戶可見的視覺場景中的感知位置處顯示的，并且所述渲染數據標識所述感知位置，以使得所述另一設備能夠在所述另一設備處顯示的視覺場景的版本中在相同感知位置處顯示所述虛擬增強元素的修改版本。

3.根據權利要求2所述的用戶設備，其中，所述虛擬增強元素是虛擬視頻窗口，并且所述虛擬增強元素的修改版本是要在相同感知位置處顯示的圖標。

4.根據權利要求1所述的用戶設備，包括：

相機輸入，被配置為從所述用戶設備的至少一個相機接收所述用戶可見的所述真實世界視圖的運動圖像，其中，所述網絡接口被配置為將所述運動圖像發送到所述另一設備，以使得所述另一設備能夠顯示所述運動圖像和在顯示的運動圖像中的感知位置處的所述虛擬增強元素的修改版本；和/或

建模模塊，被配置為使用所述用戶設備的感測裝置來生成所述用戶的環境的3D模型，其中，所述網絡接口被配置為將所述3D模型發送到所述另一設備，以用于在所述另一設備處渲染所述虛擬增強元素的修改版本。

5.根據權利要求1所述的用戶設備，包括位置跟蹤模塊，其被配置為測量所述用戶設備的當前位置和/或定向，其中，所述網絡接口被配置為將所述用戶設備的所述當前位置和/或定向的標識符發送給所述另一設備，以用于在所述另一設備處渲染所述虛擬增強元素的修改版本。

6.一種經由通信網絡在第一設備的第一用戶與第二設備的第二用戶之間實現共享的現實通信事件的方法，其中，所述第一設備通過向所述第一用戶顯示具有虛擬增強元素的環境的真實世界視圖而使視覺場景對所述第一用戶可見，并且所述第二設備向所述第二用戶顯示在所述視覺場景由所述第一用戶感知時的所述視覺場景的版本，所述方法包括：

接收渲染數據，所述渲染數據用于在所述第二設備處顯示所述視覺場景中當前正在所述第一設備處顯示的虛擬增強元素的版本；

檢測所述渲染數據何時包括在所述第二設備處捕獲并經由所述網絡發送到所述第一設備的視頻圖像；

修改所述渲染數據以去除所述視頻圖像；以及

將修改后的渲染數據提供給所述第二設備的渲染模塊，從而使得所述第二設備在它的所述視覺場景的版本中顯示不包括所述視頻圖像的虛擬增強元素的修改版本。

7.根據權利要求6所述的方法，其中，所述修改步驟在所述第二設備處通過以下來執行：利用直接從所述第二設備的相機接收的較近期捕獲的視頻圖像來替換所述視頻圖像。

8.根據權利要求7所述的方法，包括檢測何時所述虛擬增強元素在所述第二設備處顯示的所述視覺場景的版本中不再可見，并且作為響應，在所述第二設備處顯示包括直接從所述第二設備的相機接收的視頻圖像的自身圖像顯示元素，其中，當所述虛擬增強元素在所述第二設備處顯示的視覺場景的版本中不可見時，僅在所述第二設備處顯示所述自身圖像顯示元素。

9.根據權利要求6所述的方法，其中，所述修改步驟通過利用圖標替換所述視頻圖像來執行。

10.根據權利要求9所述的方法，包括在所述第二設備處與所述圖標同時顯示包括直接從所述第二設備的相機接收的視頻圖像的自身圖像顯示元素。