[發(fā)明專利]具有多個接收器的視頻流的關鍵幀削弱的方法和裝置

有效

• 申請?zhí)枺?/td>: 201780071773.0
• 申請日: 2017-11-15
• 公開（公告）號: CN110024409B
• 公開（公告）日: 2021-08-06
• 發(fā)明（設計）人: 保羅·G·布賴特-托馬斯
• 申請（專利權）人: 思科技術公司
• 主分類號: H04N19/895
• 分類號: H04N19/895;H04N19/46;H04N19/65
• 代理公司: 北京東方億思知識產(chǎn)權代理有限責任公司 11258
• 代理人: 林強

在一個實施例中，視頻編碼器生成表示包括關鍵幀的視頻幀序列的編碼比特流。編碼器生成供接收該編碼比特流的解碼器使用的信息，以使該解碼器能夠根據(jù)視頻幀序列中在關鍵幀之前的關鍵幀前視頻幀來生成顯示幀。編碼比特流被發(fā)送到解碼器。在另一實施例中，視頻解碼器從編碼器接收表示包括關鍵幀的視頻幀序列的編碼比特流。該關鍵幀包括使該解碼器能夠根據(jù)視頻幀序列中先于關鍵幀被接收的關鍵幀前視頻幀來生成顯示幀的信息。解碼器使用關鍵幀前視頻幀、包括在關鍵幀中的信息、以及包括在關鍵幀之后的編碼器確定數(shù)量的解碼幀中的信息來生成顯示幀。

技術領域

本公開涉及視頻編碼。

背景技術

關鍵幀被添加至視頻流，以便使流開始被流送，用以改變關鍵屬性 (如分辨率)，在丟失之后進行重新同步，或允許額外的接收器開始消費流。關鍵幀不依賴于視頻序列中的其他幀，并且在這樣做時被限制于壓縮技術的一個子集，該子集無法實現(xiàn)與幀間依賴性相同程度的壓縮效率。在具有受限帶寬的低延時信道中，關鍵幀的大小將被保持與典型幀相當，要不然其無法在沒有延遲的情況下傳送。這會導致質(zhì)量相對于典型幀下降的低質(zhì)量關鍵幀。在低延時雙向視頻通信中，通常在現(xiàn)有接收者或新接收者請求關鍵幀時發(fā)送關鍵幀。

關鍵幀的請求者通常不像消費流的他者那樣對這種質(zhì)量損失敏感。當?shù)贜個參與者開始消費與他者共享的流時，該參與者從零開始并且?guī)缀醪粫艿降唾|(zhì)量的第一幀的影響。但是，已進行查看該流的N-1個參與者將看到由關鍵幀引起的短期質(zhì)量損失。類似地，經(jīng)歷過分組丟失的參與者將看到由所請求的最終關鍵幀修復的損壞的流(在沒有因凍結而被隱藏的情況下)。其他參與者將經(jīng)歷暫時劣化，沒有增益。

附圖說明

圖1是根據(jù)一個示例實施例的系統(tǒng)的框圖，其中公共視頻流被發(fā)送到多個接收器(解碼器)，諸如視頻會議或協(xié)作會話中的情況，并且其中可以采用關鍵幀削弱技術。

圖2是總地描繪根據(jù)一個示例實施例的關鍵幀削弱技術的示圖。

圖3是描繪根據(jù)一個示例實施例的關鍵幀削弱技術的逐幀操作的示圖。

圖4是描繪根據(jù)一個示例實施例的在視頻編碼器處執(zhí)行的用于關鍵幀削弱技術的操作的流程圖。

圖5是描繪根據(jù)一個示例實施例的在視頻解碼器處執(zhí)行的用于關鍵幀削弱技術的操作的流程圖。

圖6是根據(jù)一個示例實施例的被配置為使用本文給出的關鍵幀削弱技術的視頻編碼器的框圖。

圖7是根據(jù)一個示例實施例的被配置為使用本文給出的關鍵幀削弱技術的視頻解碼器的框圖。

圖8是根據(jù)一個示例實施例的其中可以執(zhí)行視頻編碼和/或視頻解碼操作的計算系統(tǒng)或裝置的框圖。

具體實施方式

概覽

在獨立權利要求中闡述了本發(fā)明的各方面，并且在從屬權利要求中闡述了優(yōu)選特征。一個方面的特征可以單獨應用于每個方面或者與其他方面組合應用。

在一個實施例中，視頻編碼器生成表示包括關鍵幀的視頻幀序列的編碼比特流。編碼器生成供接收該編碼比特流的解碼器使用的信息，以使該解碼器能夠根據(jù)視頻幀序列中在關鍵幀之前的關鍵幀前視頻幀來生成顯示幀，并將該信息包括在關鍵幀中。該信息被包括在關鍵幀中，并被包括在關鍵幀之后的編碼器確定數(shù)量的幀中。

在另一實施例中，視頻解碼器從編碼器接收表示包括關鍵幀的視頻幀序列的編碼比特流。該關鍵幀包括使解碼器能夠根據(jù)在關鍵幀之前接收的關鍵幀前視頻幀來生成顯示幀的信息。解碼器使用關鍵幀前視頻幀、包括在關鍵幀中的信息以及包括在關鍵幀之后的編碼器確定數(shù)量的解碼幀中的信息來生成顯示幀。

本文還描述了對應的方法和裝置，包括網(wǎng)絡節(jié)點、計算機程序、計算機程序產(chǎn)品、計算機可讀介質(zhì)和在有形介質(zhì)上編碼的用于實現(xiàn)系統(tǒng)的邏輯。