[發明專利]針對全景視頻的優化編碼方法及裝置

有效

• 申請號: 201710464645.4
• 申請日: 2017-06-19
• 公開（公告）號: CN107396081B
• 公開（公告）日: 2019-04-12
• 發明（設計）人: 韓宇星;溫江濤;唐敏豪
• 申請（專利權）人: 深圳市鉑巖科技有限公司
• 主分類號: H04N13/00
• 分類號: H04N13/00;H04N19/124;H04N19/139;H04N19/146;H04N19/85
• 代理公司: 北京英創嘉友知識產權代理事務所(普通合伙) 11447
• 代理人: 南毅寧;魏嘉熹

本發明公開了一種針對全景視頻的優化編碼方法及裝置，用以解決現有技術無法在較低碼率下無法保證視頻質量的技術問題。所述方法包括：獲取全景視頻文件的每一編碼單元的屬性信息，其中，編碼單元是所述全景視頻文件的存儲以及編碼單位；根據每一所述編碼單元的屬性信息確定每一所述編碼單元對應的編碼方式；根據每一所述編碼單元對應的編碼方式對每一所述編碼單元進行編碼。

技術領域

本發明涉及視頻領域，具體地，涉及一種針對全景視頻的優化編碼方法及裝置。

背景技術

全景視頻指的是超過一般視野的廣角視頻內容。例如，環形或者柱形360度視頻，提供了水平方向360度的視野。全景視頻具有立體感和真實感，能夠很好的提供視覺體驗。

全景視頻的錄制有多種方法，其中，采用多個鏡頭或者攝像機可以獲得高視頻質量，但生成的視頻文件通常會是普通視頻文件大小的三到四倍，甚至更多。這對存儲和網絡傳輸都帶來巨大挑戰，尤其在網絡傳輸過程中過高的帶寬需求往往無法達到。

實際上，隨著VR(Virtual Reality，虛擬現實)技術的發展，“全景視頻”這個詞匯逐漸被很多人當作了虛擬現實內容具體呈現形式的主要代名詞。而如何在保證視頻質量的情況下，降低視頻文件的大小，節省帶寬，成為了VR技術的熱門研究問題。

由于網絡帶寬限制以及網絡傳輸的成本控制，全景視頻需要被壓縮至較低碼率，但是，VR技術為了給用戶沉浸式的體驗，其對全景視頻的質量要求很高，當前的視頻編碼標準將全景視頻壓縮至該碼率時視頻質量降低無法滿足VR技術需求。

發明內容

本發明的目的是提供一種針對全景視頻的優化編碼方法及裝置，用以解決現有技術在較低碼率下無法保證視頻質量的技術問題。

為了實現上述目的，本發明提供一種針對全景視頻的優化編碼方法，包括：

獲取全景視頻文件的每一編碼單元的屬性信息，其中，編碼單元是所述全景視頻文件的存儲及編碼單位；根據每一所述編碼單元的屬性信息確定每一所述編碼單元對應的編碼方式；根據每一所述編碼單元對應的編碼方式對每一所述編碼單元進行編碼。

在結合第一方面的第一種可能的實現方式中，所述全景視頻文件是根據立方體圖像投影方式處理全景視頻流得到并存儲的視頻文件，其中，所述全景視頻文件包括多個獨立存儲的子視頻文件，所述獲取全景視頻的每一編碼單元的屬性信息包括：采用預壓縮方式獲取所述子視頻文件的每一編碼單元的運動矢量信息，所述屬性信息包括所述運動矢量信息。

在結合第一方面的第二種可能的實現方式中，所述全景視頻文件是根據球面Equirectangular投影方式處理全景視頻流得到并存儲的視頻文件，所述獲取全景視頻的每一編碼單元的屬性信息包括：根據每一所述編碼單元在播放時的實際顯示面積優化編碼權重參數，所述屬性信息包括優化后的所述編碼權重參數。

結合第一方面的第一種可能的實現方式，在第一方面的第三種可能的實現方式中，所述根據每一所述編碼單元的屬性信息確定每一所述編碼單元對應的編碼方式包括：根據所述編碼單元的運動矢量信息確定所述編碼單元滿足低運動強度條件，確定所述編碼單元對應的編碼方式為低碼率的編碼方式。

結合第一方面的第一或者第三種可能的實現方式，在第一方面的第四種可能的實現方式中，所述方法還包括：預測在播放所述全景視頻時，觀看者每一時刻的觀看方向；在觀看的任一時刻，根據第一流傳輸方式傳輸觀看者下一時刻的觀看方向上的子視頻文件，并根據第二流傳輸方式傳輸觀看者下一時刻的觀看方向以外的子視頻文件，其中，所述第一流傳輸方式的幀速率大于所述第二流傳輸方式。

結合第一方面的第四種可能的實現方式，在第一方面的第五種可能的實現方式中，所述預測在觀看所述全景視頻時，每一時刻被觀看到的子視頻文件，包括：獲取所述全景視頻文件的歷史觀看信息；根據所述歷史觀看信息預測觀看者每一時刻的觀看方向。