[發明專利]可變端點用戶界面渲染

在審

• 申請號: 201980092552.0
• 申請日: 2019-02-25
• 公開（公告）號: CN113455008A
• 公開（公告）日: 2021-09-28
• 發明（設計）人: 尼古拉斯·瓦伊寧;保羅·拉隆德
• 申請（專利權）人: 谷歌有限責任公司
• 主分類號: H04N21/2343
• 分類號: H04N21/2343;H04N21/236;H04N21/431;H04N21/61;H04N21/81;A63F13/52;G06F9/451;A63F13/355
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 李寶泉;周亞榮

本文描述了用于渲染組合用戶界面(UI)的不同組件的方法和系統。處理設備接收對待經由包括一個或多個視頻內容組件和一個或多個UI控件組件的組合UI呈現的媒體項的用戶請求。處理設備生成視頻內容組件的渲染并將包括視頻內容組件的渲染的第一流傳送到端點設備，其中，第一流被編碼為第一分辨率，并且其中，視頻內容組件的渲染將在端點設備處與UI控件組件的渲染合并成組合UI，該組合UI具有第二分辨率。

技術領域

本公開的各方面一般涉及用戶界面渲染，并且更具體地涉及單獨地渲染組合用戶界面的不同組件。

背景技術

流傳輸的內容可以經由用戶界面(UI)呈現在用戶設備上。UI可以包括視頻內容組件和UI控件組件。例如，用于在線游戲的UI可以包括呈現游戲的實況內容的游戲玩法組件以及呈現關于游戲的信息并提供允許游戲觀眾和/或參與者與游戲交互的控件的游戲控制組件。

通常，流傳輸的內容UI的視頻內容組件和UI控件組件在服務器處一起被渲染以創建一個視頻流，然后以一種分辨率對其進行編碼并傳送到用戶設備。用于編碼的分辨率通常是用戶設備支持的最大分辨率(例如，4096x4096)。

發明內容

下述發明內容是本公開的簡要發明內容以便提供對本公開的一些方面的基本理解。本發明內容不是本公開的廣泛概述。它既不旨在標識本公開的關鍵或決定性要素，也不旨在描繪本公開的特定實施例的任何范圍或權利要求的任何范圍。其唯一目的是以簡化形式呈現本公開的一些概念作為稍后呈現的更詳細描述的序言。

根據本公開的一些方面，提供了一種方法，其包括在服務器處接收對待經由組合用戶界面(UI)呈現的媒體項的用戶請求，該組合用戶界面(UI)包括一個或多個視頻內容組件和一個或多個UI控件組件；生成視頻內容組件的渲染；以及將包括視頻內容組件的渲染的第一流傳送到端點設備，其中，第一流被編碼為第一分辨率，并且其中，視頻內容組件的渲染將在端點設備處與UI控件組件的渲染合并成組合UI，該組合UI具有第二分辨率。

根據本公開的其他方面，提供了一種方法，其包括在服務器處接收對待經由組合用戶界面(UI)呈現的媒體項的用戶請求，該組合用戶界面(UI)包括一個或多個視頻內容組件和一個或多個UI控件組件；生成視頻內容組件的渲染；將包括視頻內容組件的渲染的第一流傳送到端點設備，其中，第一流被編碼為第一分辨率；確定在服務器處或者在端點設備處生成UI控件組件的渲染；響應于確定在端點設備處生成UI控件組件的渲染，經由網絡向端點設備傳送用于渲染UI控件組件的命令集，該UI控件組件的渲染具有第一分辨率或第二分辨率；以及響應于確定在服務器處生成UI控件組件的渲染：在服務器處執行用于渲染UI控件組件的命令集以生成UI控件組件的渲染，以及將包括UI控件組件的渲染的第二流傳送到端點設備。

可選地，該方法可以包括在服務器處執行命令集以生成UI控件組件的渲染并且將包括UI控件組件的渲染的第二流傳送到端點設備，第二流被編碼為第二分辨率。該方法可以包括將用于渲染UI控件組件的命令集傳送到端點設備以在端點設備處以第二分辨率生成UI控件組件的渲染。該方法可以包括確定是在服務器處或者在端點設備處生成UI控件組件的渲染；響應于確定在端點設備處生成UI控件組件的渲染，經由網絡向端點設備傳送用于渲染UI控件組件的命令集，該UI控件組件的渲染具有第二分辨率；以及響應于確定在服務器處生成UI控件組件的渲染，在服務器處執行用于渲染UI控件組件的命令集以生成UI控件組件的渲染，并且將包括UI控件組件的渲染的第二流傳送到端點設備。第二分辨率可以高于第一分辨率，并且可以修改視頻內容組件的渲染以匹配在端點設備處的UI控件組件的第二分辨率。是否在服務器處或者在端點設備處執行該命令集的確定可以基于以下至少一項：端點設備的硬件能力、端點設備的分辨率、組合UI的目標分辨率、服務器的渲染能力、或網絡上可用的帶寬。組合UI可以經由視頻內容組件呈現在線游戲，并且經由UI控件組件呈現關于游戲的信息并且接收屬于游戲的用戶輸入。