[發明專利]用于共享場景網格數據同步的方法、系統及可讀介質

有效

• 申請號: 202010186770.5
• 申請日: 2016-01-21
• 公開（公告）號: CN111372098B
• 公開（公告）日: 2021-11-19
• 發明（設計）人: J·派特爾;M·埃利斯;A·比留柯夫;繆志澄;R·S·梅內澤斯
• 申請（專利權）人: 微軟技術許可有限責任公司
• 主分類號: H04N21/236
• 分類號: H04N21/236;H04N21/2385;H04N21/24;H04N21/6375
• 代理公司: 永新專利商標代理有限公司 72002
• 代理人: 賈麗萍

一種在通信架構內的計算設備，該用戶設備包括：圖像捕獲設備，其被配置為確定用于創建定義共享場景的視頻信道的圖像數據以及內在/外在捕獲設備數據；表面重構實體，其被配置為確定與來自圖像捕獲設備的圖像數據相關聯的表面重構數據；視頻信道，其被配置為對圖像數據以及內在/外在捕獲設備數據進行編碼和分包；表面重構信道，其被配置為對表面重構數據進行編碼和分包；發射機，其被配置為發送視頻信道分組和表面重構信道分組；以及帶寬控制器，其被配置為對分配給視頻信道和表面重構信道的帶寬進行控制。

本申請是申請日為2016年1月21日、申請號為201680006828.5、發明名稱為“共享場景網格數據同步”的中國專利申請的分案申請。

背景技術

基于分組的通信系統允許設備(例如，個人計算機)的用戶使用諸如互聯網協議(IP)的分組協議跨計算機網絡進行通信。基于分組的通信系統能夠用于各種類型的通信事件。能夠被建立的通信事件包括語音通話、視頻通話、即時消息傳遞、語音郵件、文件傳送、以及其它。這些系統對用戶有益，因為相比于固定線路或移動網絡，這些系統經常是顯著地較低成本的。長距離通信可以尤其是這種情況。為了使用基于分組的系統，用戶在他們的設備上安裝并執行客戶端軟件。客戶端軟件提供基于分組的連接以及其它功能，例如，注冊和認證。

通信系統允許設備的用戶跨諸如互聯網的計算機網絡進行通信。能夠被建立的通信事件包括語音通話、視頻通話、即時消息傳遞、語音郵件、文件傳送、以及其它。利用視頻通話，呼叫者能夠查看視頻圖像。

發明內容

提供本發明內容以便以簡化的形式引入下面在具體實施方式中進一步描述的概念的選擇。本發明內容并非旨在識別所要求保護的主題的關鍵特征或必要特征，也并非旨在用于限制所要求保護的主題的范圍。所要求保護的主題也并非限于解決在背景技術部分中指出的缺點中的任何缺點或全部缺點的實現方式。

本公開的實施例與共享場景(例如，在協作混合現實應用中生成的) 內的對象的管理和同步有關。在協作混合現實應用中，參與者能夠可視化、放置共享場景中的對象，并與共享場景中的對象進行交互。共享場景典型地是參與者中的一個參與者的周圍空間的表示，例如，場景可以包括來自參與者中的一個參與者的視點的視頻圖像。對象或視覺對象能夠被“放置”在場景內，并且可以具有能夠被參與者“看到”并與其進行交互的視覺表示。此外，對象能夠具有相關聯的內容。例如，對象可以具有諸如音頻/視頻或文本的相關聯的內容。例如，參與者可以將視頻播放器對象放置在共享場景中，并且與其進行交互以開始播放視頻以供所有參與者觀看。然后，另一參與者可以與視頻播放器對象進行交互以控制回放或改變其在場景中的位置。

發明者已經認識到，為了維持方案內的這些對象的同步，表面重建數據(也被稱為網格數據)的高效傳送可以是有意義的。

根據本公開的第一方面，提供了一種在通信架構內的用戶設備，該用戶設備包括：圖像捕獲設備，其被配置為確定圖像數據以及內在/外在捕獲設備數據以用于創建定義共享場景的視頻信道；表面重構實體，其被配置為確定與來自圖像捕獲設備的圖像數據相關聯的表面重構數據；視頻信道，其被配置為對圖像數據以及內在/外在捕獲設備數據進行編碼和分包；表面重構信道，其被配置為對表面重構數據進行編碼和分包；發射機，其被配置為發送視頻信道分組和表面重構信道分組；以及帶寬控制器，其被配置為對分配給視頻信道和表面重構信道的帶寬進行控制。

根據本公開的另一方面，提供了一種在通信架構內實現的方法，該方法包括：確定來自圖像捕獲設備的圖像數據以及內在/外在捕獲設備數據以用于創建定義共享場景的視頻信道；確定與來自圖像捕獲設備的圖像數據相關聯的表面重構數據；對視頻信道內的圖像數據以及內在/外在捕獲設備數據進行編碼和分包；對表面重構信道內的表面重構數據進行編碼和分包；發送視頻信道分組和表面重構信道分組；以及對分配給視頻信道和表面重構信道的帶寬進行控制。