[發明專利]用于有損無線鏈路的視頻編解碼器數據恢復技術

在審

• 申請號: 201880082365.X
• 申請日: 2018-09-24
• 公開（公告）號: CN111492660A
• 公開（公告）日: 2020-08-04
• 發明（設計）人: 武玉榮
• 申請（專利權）人: 超威半導體公司
• 主分類號: H04N19/51
• 分類號: H04N19/51;H04L1/00
• 代理公司: 上海勝康律師事務所 31263
• 代理人: 樊英如;張靜

公開了用于實現有損無線鏈路的數據恢復技術的系統、裝置和方法。發射器被配置為對視頻流進行編碼并將所編碼的視頻流無線傳輸到接收器，其中所述視頻流表示虛擬現實(VR)呈現的環境。所述發射器基于頻率將所述視頻流劃分為多個子流分量。僅計算所述視頻流的最低頻率子流分量的運動矢量參數，然后使用低MCS級別將所述運動矢量參數發送到所述接收器。當所述接收器接收到所述運動矢量參數，但所述接收器未接收到給定組塊的最低頻率分量時，所述接收器使用所述運動矢量參數通過從先前視頻幀的對應組塊外推來重建所述給定組塊的所述最低頻率分量。

背景技術

相關技術描述

無線通信鏈路可用于將視頻流從計算機(或其他設備)發送到虛擬現實(VR)耳機(或頭戴式顯示器(HMD))。無線傳輸VR視頻流消除了在計算機與佩戴HMD的用戶之間建立電纜連接的需求，從而允許用戶不受限制地移動。計算機與HMD之間的傳統電纜連接通常包括一根或多根數據電纜和一根或多根電力電纜。允許用戶在沒有電纜系繩且不必意識到要避開電纜的情況下四處移動可以創建一個更加沉浸式的VR系統。無線發送VR視頻流還允許VR系統在比以前更廣泛范圍的應用中使用。

然而，VR應用是低延遲的應用，通常不緩存視頻數據。例如，當用戶移動其頭部時，這由HMD或控制臺檢測到，然后隨后呈現的視頻幀被更新以反映用戶的新的觀察位置。此外，鏈路的不斷變化的狀況可能會影響視頻質量。當鏈路惡化和視頻數據丟失或損壞時，這可能會導致糟糕的用戶體驗。因此，用于無線流傳輸數據的改進的技術是期望的。

附圖說明

通過結合附圖參考以下具體實施方式，可更好地理解本文所述的方法和機制的優點，在附圖中：

圖1為系統的一個實施方案的框圖。

圖2為無線虛擬現實(VR)系統的一個實施方案的框圖。

圖3為用于一系列視頻幀的一組運動矢量的一個實施方案的框圖。

圖4為從相鄰部分外推視頻幀的丟失部分的高分辨率版本的一個實施方案的框圖。

圖5為用于從視頻流的低頻子流分量生成運動矢量分量的邏輯的一個實施方案的框圖。

圖6為示出了用于計算和傳輸視頻流的低頻分量的運動矢量參數的方法的一個實施方案的一般化流程圖。

圖7為示出了用于使用視頻幀的低頻子流分量的運動矢量參數來重建視頻幀的丟失的組塊的方法的一個實施方案的一般化流程圖。

圖8為示出了用于將視頻幀的低頻子流分量的運動矢量參數嵌入波束形成或ACK事務中的方法的一個實施方案的一般化流程圖。

圖9為示出了用于從相鄰塊重建視頻幀的塊的高頻分量的方法的一個實施方案的一般化流程圖。

圖10為示出了用于選擇用于傳輸視頻流的MCS級別的方法的一個實施方案的一般化流程圖。

具體實施方式

在以下描述中，闡述了許多特定細節以提供對本文呈現的方法和機制的透徹理解。然而，本領域的一般技術人員應當認識到，可在沒有這些特定細節的情況下實現各種實施方案。在某些情況下，并未詳細示出眾所周知的結構、分量、信號、計算機程序指令和技術，以避免混淆本文所述的方法。應當理解，為了使說明清楚簡單，附圖中所示的元素未必按比例繪制。例如，元素中的一些的尺寸可相對于其他元件被放大。

本文公開了用于實現有損無線鏈路的數據恢復技術的各種系統、裝置、方法和計算機可讀介質。在一個實施方案中，無線通信系統包括通過無線鏈路進行通信的發射器和接收器(例如，頭戴式顯示器(HMD))。在一個實施方案中，發射器被配置為對視頻流進行編碼并且將編碼的視頻流無線傳輸到接收器。在一個實施方案中，視頻流表示虛擬現實(VR)呈現的環境。