[發明專利]針對拆分XR的跨層流量優化

在審

• 申請號: 201980059091.7
• 申請日: 2019-09-17
• 公開（公告）號: CN112673642A
• 公開（公告）日: 2021-04-16
• 發明（設計）人: Q.薛;M.卡拉斯奈安斯基;B.莫漢蒂;A.V.拉奧;S.戴茲斯賓多拉;B.弗爾塞爾杰;S.K.拉克什米坎塔
• 申請（專利權）人: 高通股份有限公司
• 主分類號: H04N21/422
• 分類號: H04N21/422;H04N21/81;H04N21/436;H04N21/6587
• 代理公司: 北京市柳沈律師事務所 11105
• 代理人: 安之斐

討論了一種用于顯示擴展現實(XR)內容的改進的無線拆分渲染系統。渲染服務器和客戶端頭戴式設備(HMD)可以在無線介質上通信，其中，通信控制被給予服務器應用層邏輯。這允許服務器僅在需要渲染時才使用來自HMD的請求姿勢信息，同時保留無線介質上的帶寬以發送渲染內容的幀。這可以減少競爭并提高信道效率。

本申請要求于2019年9月16日遞交的美國非臨時專利申請No.16/572,017的優先權，該美國非臨時專利申請要求于2018年9月17日遞交的印度臨時專利申請No.201841034992的優先權，其整體內容以引用方式并入本文。

技術領域

本公開涉及圖像內容信息的處理，更具體地，涉及拆分(split)渲染的內容的處理以向顯示器輸出。

背景技術

拆分渲染系統可以包括通過網絡(例如，無線網絡、有線網絡等)進行通信的至少一個主機設備和至少一個客戶端設備。主機設備充當無線接入點，并使用一個或多個無線通信標準(例如，IEEE 802.11)將圖像內容信息(可能包括音頻視頻(AV)數據、音頻數據和/或視頻數據)發送給參與特定分組的通信會話的一個或多個客戶端設備。圖像內容信息可以在客戶端設備處播放。更具體地，每個參與的客戶端設備處理所接收的圖像內容信息以在其顯示器和音頻設備上呈現。另外，主機設備可以對圖像內容信息執行至少一些處理以在客戶端設備上呈現。

主機設備和一個或多個客戶端設備可以是無線設備，或者具有無線通信功能的有線設備。在一個示例中，作為有線設備，主機設備和客戶端設備中的一個或多個可以包括具有無線通信功能的電視、監視器、投影儀、機頂盒、DVD或藍光光盤播放器、數字錄像機、膝上型或桌面型個人計算機，視頻游戲機等視頻游戲機等。在另一個示例中，作為無線設備，主機設備和客戶端設備中的一個或多個可以包括移動電話、具有無線通信卡的便攜式計算機、個人數字助理(PDA)、便攜式媒體播放器或者具有無線通信功能的其它閃存設備，包括所謂的“智能”電話和“智能”平板或平板電腦，或者其它類型的無線通信設備(WCD)。

在一些示例中，客戶端設備中的至少一個可以包括可穿戴顯示設備。可穿戴顯示設備可以包括穿戴在用戶身上的任何類型的有線或無線顯示設備。作為示例，可穿戴顯示設備可以包括佩戴在用戶的頭部上的無線頭戴顯示器或無線頭盔式顯示器(WHMD)，以便將一個或多個顯示屏放置在用戶的眼前。主機設備典型地負責對圖像內容信息執行至少一些處理，以顯示在可穿戴顯示設備上。可穿戴式顯示設備典型地負責準備圖像內容信息以在可穿戴式顯示設備上顯示。

發明內容

在一個示例實施例中，討論了一種渲染幀以向用戶顯示的方法。該方法包括發起與服務器的無線連接。該方法包括確定用戶的姿勢信息。該方法包括，響應于從服務器接收觸發器分組，通過無線連接向服務器發送該姿勢信息。該方法包括通過無線連接從服務器接收渲染的幀，該渲染的幀基于發送的姿勢信息被渲染用于顯示。該方法包括將接收到的渲染的幀顯示給用戶。發送的姿勢信息可以是6自由度(6DoF)姿勢。該方法可以包括在向用戶顯示之前基于最近的姿勢信息在接收到的渲染的幀上執行異步時間扭曲(asynchronoustime warping，ATW)。無線連接可以是WiFi反向許可模式連接，并且服務器是WiFi網絡上的接入點(AP)。該方法可以包括如果沒有接收到觸發器分組，則在預定時間段之后發送姿勢信息。渲染的幀可以是用于向用戶顯示的三維虛擬現實(VR)或增強現實(AR)內容的第一視圖。觸發器分組是以規則的間隔發送的。觸發器分組是響應于確定沒有渲染的幀要發送而發送的。觸發器分組是響應于需要姿勢信息來渲染幀而發送的。觸發器分組是由在服務器上運行的應用層模塊發起的。