[發(fā)明專利]網(wǎng)絡(luò)控制的3D視頻捕獲

有效

• 申請?zhí)枺?/td>: 201880067050.8
• 申請日: 2018-10-22
• 公開（公告）號: CN111213088B
• 公開（公告）日: 2022-05-10
• 發(fā)明（設(shè)計）人: S·G·福沃斯
• 申請（專利權(quán)）人: 微軟技術(shù)許可有限責(zé)任公司
• 主分類號: G03B37/04
• 分類號: G03B37/04;G06T19/00;H04N5/232;H04N5/247;H04N7/18;G06T7/593;H04N13/243;H04N13/344;H04N13/271;H04N13/296
• 代理公司: 北京市金杜律師事務(wù)所 11256
• 代理人: 姚杰

1.一種計算設(shè)備，包括：

處理單元；

存儲器；以及

網(wǎng)絡(luò)連接；

所述計算設(shè)備經(jīng)由計算機(jī)可執(zhí)行指令被編程為實(shí)現(xiàn)執(zhí)行操作以用于控制三維(3D)視頻捕獲的控制器，所述操作包括：

經(jīng)由所述網(wǎng)絡(luò)連接，從多個組件接收連接，其中所述多個組件處理信息以用于從捕獲的現(xiàn)實(shí)世界視頻輸入來生成三維全息視頻輸出，其中所述多個組件在多個其他計算設(shè)備上運(yùn)行，并且其中所述多個其他計算設(shè)備與所述計算設(shè)備分離，并且經(jīng)由所述網(wǎng)絡(luò)連接與所述計算設(shè)備通信，并且其中所述多個組件包括：

多個深度生成器；

編碼器，其中所述編碼器將編碼的視頻圖像從多個視頻相機(jī)傳輸?shù)椒职l(fā)器；以及

所述分發(fā)器，其中所述分發(fā)器將來自所述編碼的視頻圖像的圖像數(shù)據(jù)分發(fā)到所述多個深度生成器；

經(jīng)由所述網(wǎng)絡(luò)連接，從所述多個組件接收狀態(tài)更新消息，其中所述狀態(tài)更新消息包括所述多個組件處于就緒狀態(tài)的指示；以及

在從所述多個組件接收到所述狀態(tài)更新消息后，經(jīng)由所述網(wǎng)絡(luò)連接向所述多個組件廣播開始命令；

其中所述多個組件至少部分地基于從所述計算設(shè)備所接收的所述開始命令，開始處理信息以用于從所述捕獲的現(xiàn)實(shí)世界視頻輸入來生成所述三維全息視頻輸出。

2.根據(jù)權(quán)利要求1所述的計算設(shè)備，其中所述分發(fā)器在距所述編碼器的遠(yuǎn)程網(wǎng)絡(luò)中操作。

3.根據(jù)權(quán)利要求1所述的計算設(shè)備，其中所述分發(fā)器在向所述計算設(shè)備發(fā)送報告所述就緒狀態(tài)的所述狀態(tài)更新消息之前，建立與所述多個深度生成器組件的直接網(wǎng)絡(luò)連接。

4.根據(jù)權(quán)利要求1所述的計算設(shè)備，其中所述編碼器在向所述計算設(shè)備發(fā)送報告所述就緒狀態(tài)的所述狀態(tài)更新消息之前，建立與所述分發(fā)器的直接網(wǎng)絡(luò)連接。

5.根據(jù)權(quán)利要求1所述的計算設(shè)備，所述操作還包括：

當(dāng)狀態(tài)更新消息從所述多個組件中的一個組件被接收到時，向所述多個組件廣播當(dāng)前系統(tǒng)狀態(tài)，其中所述當(dāng)前系統(tǒng)狀態(tài)包括所述多個組件的狀態(tài)信息。

6.根據(jù)權(quán)利要求1所述的計算設(shè)備，其中所述多個組件經(jīng)由一個或多個局域網(wǎng)或廣域網(wǎng)連接，并且其中所述多個組件運(yùn)行在對應(yīng)的多個不同計算設(shè)備上。

7.根據(jù)權(quán)利要求1所述的計算設(shè)備，其中多個組件包括：

融合組件；以及

繪制器組件。

8.一種由包括處理單元和存儲器的計算設(shè)備實(shí)現(xiàn)的方法，所述方法包括：

由運(yùn)行在所述計算設(shè)備上的控制器：

經(jīng)由網(wǎng)絡(luò)連接，從多個組件接收連接，其中所述多個組件處理信息以用于從捕獲的現(xiàn)實(shí)世界視頻輸入來生成三維全息視頻輸出，其中所述多個組件在多個其他計算設(shè)備上運(yùn)行，其中所述多個其他計算設(shè)備與所述計算設(shè)備分離，并且經(jīng)由所述網(wǎng)絡(luò)連接與所述計算設(shè)備通信，并且其中所述多個組件包括：

多個深度生成器；

編碼器，其中所述編碼器將編碼的視頻圖像從多個視頻相機(jī)傳輸?shù)椒职l(fā)器；以及

所述分發(fā)器，其中所述分發(fā)器將來自所述編碼的視頻圖像的圖像數(shù)據(jù)分發(fā)到所述多個深度生成器；

經(jīng)由所述網(wǎng)絡(luò)連接，向所述多個組件廣播系統(tǒng)狀態(tài)消息，其中所述系統(tǒng)狀態(tài)消息包括所述多個組件的當(dāng)前狀態(tài)信息，并且其中所述系統(tǒng)狀態(tài)消息響應(yīng)于狀態(tài)改變在所述多個組件間被廣播；

經(jīng)由所述網(wǎng)絡(luò)連接，從所述多個組件接收狀態(tài)更新消息，其中所述狀態(tài)更新消息包括所述多個組件處于就緒狀態(tài)的指示；

在從所述多個組件接收到所述狀態(tài)更新消息后，經(jīng)由所述網(wǎng)絡(luò)連接向所述多個組件廣播開始命令；

其中所述多個組件根據(jù)至少部分基于所述廣播系統(tǒng)狀態(tài)消息的啟動順序，開始處理信息以用于從所述捕獲的現(xiàn)實(shí)世界視頻輸入來生成所述三維全息視頻輸出。

9.根據(jù)權(quán)利要求8所述的方法，其中所述廣播系統(tǒng)狀態(tài)消息包括針對所述多個組件的網(wǎng)絡(luò)連接信息，并且其中所述多個組件使用所述網(wǎng)絡(luò)連接信息來在所述多個組件間建立直接網(wǎng)絡(luò)連接。