[發明專利]遠程呈現設備操作方法

在審

• 申請號: 201980026277.2
• 申請日: 2019-04-02
• 公開（公告）號: CN111989914A
• 公開（公告）日: 2020-11-24
• 發明（設計）人: R·G·卡特勒
• 申請（專利權）人: 微軟技術許可有限責任公司
• 主分類號: H04N7/14
• 分類號: H04N7/14
• 代理公司: 永新專利商標代理有限公司 72002
• 代理人: 趙騰飛

1.一種操作遠程呈現設備的方法，包括：

使用多個相機捕獲本地主體的圖像，以生成多個本地捕獲圖像；

從遠程設備接收遠程主體視點(POV)數據；

基于所述遠程主體POV數據，從所述多個本地捕獲圖像中選擇多個圖塊；以及

向所述遠程設備發送本地圖像數據，所述本地圖像數據包括所述多個選擇的圖塊。

2.根據權利要求1所述的方法，其中，所述多個相機通過顯示器捕獲所述本地主體的所述圖像。

3.根據權利要求1所述的方法，其中，所述多個相機包括多個光場相機。

4.根據權利要求1所述的方法，還包括：

掃描所述本地主體以估計所述多個相機和所述本地主體之間的多個深度；以及

向所述多個選擇的圖塊添加深度信息，其中，所述深度信息包括所述多個選擇的圖塊的所述多個估計的深度。

5.根據權利要求1所述的方法，其中，所述遠程主體POV數據包括遠程主體的先前的、當前的和所估計的未來的POV中的至少一個。

6.一種操作遠程呈現設備的方法，包括：

使用多個相機捕獲本地主體的圖像，以生成多個本地捕獲圖像；

處理所述多個本地捕獲圖像以生成本地主體視點(POV)數據；

向遠程設備發送本地主體視點(POV)數據；

從所述遠程設備接收遠程圖像數據，所述遠程圖像數據包括所述遠程設備基于所述本地主體POV數據選擇的多個第一圖塊；

基于所述本地主體POV數據從所述多個第一圖塊中選擇多個第二圖塊；以及

在顯示器上，顯示基于所述多個第二圖塊合成的遠程主體的圖像。

7.根據權利要求6所述的方法，其中，所述多個相機通過所述顯示器捕獲所述本地主體的所述圖像。

8.根據權利要求6所述的方法，其中，所述多個相機包括多個光場相機。

9.根據權利要求6所述的方法，其中，所述本地主體POV數據包括所述本地主體的先前的、當前的和所估計的未來的POV中的至少一個。

10.根據權利要求9所述的方法，其中，所述多個第二圖塊是基于所述先前的、當前的和所估計的未來的POV中的至少一個而從所述多個第一圖塊中選擇的。

11.一種操作遠程呈現設備的方法，包括：

使用第一遠程呈現設備的多個第一相機，捕獲位于第一位置的第一主體的圖像，以生成所述第一主體的多個第一捕獲圖像；

使用第二遠程呈現設備的多個第二相機，捕獲位于第二位置的第二主體的圖像，以生成所述第二主體的多個第二捕獲圖像；

在所述第一遠程呈現設備處，處理所述多個第一捕獲圖像，以生成第一主體視點(POV)數據；

在所述第二遠程呈現設備處，處理所述多個第二捕獲圖像，以生成第二主體POV數據；

從所述第一遠程呈現設備向所述第二遠程呈現設備發送所述第一主體POV數據；

從所述第二遠程呈現設備向所述第一遠程呈現設備發送所述第二主體POV數據；

在所述第一遠程呈現設備處，基于所述第二主體POV數據從所述多個第一捕獲圖像中選擇多個第一圖塊；

從所述第一遠程呈現設備向所述第二遠程呈現設備發送第一圖像數據，所述第一圖像數據包括所述多個第一圖塊；

從所述第二遠程呈現設備向所述第一遠程呈現設備發送第二圖像數據，所述第二圖像數據包括所述多個第二圖塊；

在所述第一遠程呈現設備處，基于所述第一主體POV數據從所述多個第二圖塊中選擇多個第三圖塊；以及

在所述第一遠程呈現設備的第一顯示器上，顯示基于所述多個第三圖塊合成的所述第二主體的圖像。

12.根據權利要求11所述的方法，其中，所述多個第一相機和所述多個第二相機包括多個光場相機。