[發明專利]使用虛擬視圖廣播器云生成要流式傳輸到VR/AR平臺的內容

有效

• 申請號: 201880015676.4
• 申請日: 2018-01-04
• 公開（公告）號: CN110383346B
• 公開（公告）日: 2023-02-03
• 發明（設計）人: 黃仁勛;R·萊巴雷迪安;C·維沃利
• 申請（專利權）人: 輝達公司
• 主分類號: G06T19/20
• 分類號: G06T19/20;A63F13/30
• 代理公司: 北京市磐華律師事務所 11336
• 代理人: 高偉

1.一種虛擬視圖廣播器，包括：

基于云的渲染器，配置成從位于計算機應用程序中的虛擬相機生成虛擬視圖圖像，其中所述基于云的渲染器包括多個圖形處理單元(GPU)；和

圖像處理器，配置成使用所述虛擬視圖渲染圖像生成用于所述虛擬相機的虛擬視圖流，其中所述虛擬視圖圖像來自所述虛擬相機處的不同觀看方向，以及所述基于云的渲染器中的每個GPU用于生成所述不同觀看方向之一的虛擬視圖圖像。

2.如權利要求1所述的虛擬視圖廣播器，其中，所述圖像處理器包括拼接器，所述拼接器配置成拼接來自每個所述不同觀看方向的所述虛擬視圖圖像，以生成用于所述虛擬相機的圖像流。

3.如權利要求2所述的虛擬視圖廣播器，其中，所述圖像處理器包括編碼器，所述編碼器配置成對所述圖像流進行編碼以生成用于所述虛擬相機的所述虛擬視圖流。

4.如權利要求1所述的虛擬視圖廣播器，其中，所述虛擬視圖流是球形虛擬視頻。

5.如權利要求4所述的虛擬視圖廣播器，其中，所述球形虛擬視頻是立體視頻。

6.如權利要求1所述的虛擬視圖廣播器，其中，所述計算機應用程序包括多個虛擬相機，并且基于選擇輸入從所述多個虛擬相機中選擇所述虛擬相機。

7.如權利要求6所述的虛擬視圖廣播器，其中，所述虛擬視圖廣播器從虛擬視圖廣播器接收所述選擇輸入。

8.如權利要求1所述的虛擬視圖廣播器，其中，所述基于云的渲染器使用應用程序數據來生成所述虛擬視圖圖像。

9.如權利要求8所述的虛擬視圖廣播器，其中，所述計算機應用程序是基于云的視頻游戲，并且所述應用程序數據來自所述基于云的視頻游戲的活動玩家。

10.如權利要求8所述的虛擬視圖廣播器，其中，所述應用程序數據來自運行所述計算機應用程序的客戶端計算設備。

11.如權利要求1所述的虛擬視圖廣播器，還包括視頻發送器，配置成將所述虛擬視圖流發送到虛擬觀看者的計算設備。

12.如權利要求11所述的虛擬視圖廣播器，其中，所述視頻發送器配置成將所述虛擬視圖流發送到多個計算設備。

13.如權利要求1所述的虛擬視圖廣播器，其中，所述虛擬視圖廣播器從位于所述計算機應用程序中的多個虛擬相機生成多個虛擬視圖流。

14.如權利要求1所述的虛擬視圖廣播器，其中，所述虛擬相機是移動虛擬相機。

15.如權利要求1所述的虛擬視圖廣播器，其中，所述計算機應用程序是基于云的視頻游戲。

16.一種用于基于云的視頻游戲的虛擬視圖廣播系統，包括：

網絡服務器，其從位于計算機應用程序內的虛擬相機生成多個基于計算機的虛擬視圖圖像，其中所述網絡服務器包括多個圖形處理單元(GPU)；

拼接單元，其拼接所述基于計算機的虛擬視圖圖像以形成用于所述虛擬相機的360度視圖圖像集，其中每個GPU用于生成與所述虛擬相機的不同相機方向相對應的基于計算機的虛擬視圖圖像；和

編碼器，其將所述360度視圖圖像集編碼為視頻流，以便發送到計算設備以供觀看。

17.如權利要求16所述的虛擬視圖廣播系統，其中，每個所述基于計算機的虛擬視圖圖像對應于所述虛擬相機的不同相機方向之一。

18.如權利要求16所述的虛擬視圖廣播系統，其中，所述計算機應用程序是基于云的視頻游戲，以及所述計算設備是虛擬觀看者的計算設備。

19.一種視頻游戲廣播器，用于具有多個活動玩家的基于云的視頻游戲，包括：

渲染引擎，其配置成從玩視頻游戲的活動玩家的不同觀看方向生成一組虛擬視圖圖像，其中所述渲染引擎包括多個圖形處理單元(GPU)，以及每個GPU用于生成所述不同觀看方向之一的虛擬視圖圖像；和

圖像處理器，其配置成拼接各組中的每組虛擬視圖圖像，以形成與每個所述活動玩家相對應的360度虛擬視圖，以及將所拼接的360度虛擬視圖編碼成不同的視頻流，其中基于選擇輸入選擇至少一個所述不同的視頻流以發送到計算設備用于觀看。