[發明專利]增強幀序列質量的方法以及系統

在審

• 申請號: 202211027634.7
• 申請日: 2022-08-25
• 公開（公告）號: CN115733935A
• 公開（公告）日: 2023-03-03
• 發明（設計）人: 王耀笙;叢培貴;陳泂甫;黃偉文;張棹閔;林鈺盛;呂佳倪;陳志成
• 申請（專利權）人: 聯發科技股份有限公司
• 主分類號: H04N5/14
• 分類號: H04N5/14;H04N7/01;G06T1/20;G06T3/40;G06T5/00
• 代理公司: 深圳市威世博知識產權代理事務所(普通合伙) 44280
• 代理人: 強珍妮

本發明提供一種增強幀序列質量的方法以及系統，其中方法包括：第一級電路當檢測到系統資源的特定狀況時，調整待輸出的幀序列的質量并輸出具有質量劣化的幀序列，幀序列的質量劣化包括不均勻的分辨率和不均勻的每秒幀數FPS中的至少一個；提升引擎從第一級電路接收幀序列，并基于該幀序列產生增強的幀序列以用于傳輸到第二級電路。使用該方案，可以增強幀序列質量。

技術領域

本發明的實施例涉及用于增強幀質量的圖像和視頻處理。

背景技術

典型的邊緣(edge)電子設備，例如電視、智能手機、可穿戴設備、便攜式計算設備、游戲設備等，由于對功耗和熱性能的嚴格要求而具有有限的計算能力。邊緣設備上的圖形渲染(rendering)操作通常會導致大量的圖形處理單元(graphics processing unit，GPU)工作量。為了保持用于平滑圖像顯示的目標幀速率，邊緣設備可能會造成高功耗。有時，由于各種資源限制，例如高計算工作量限制和功耗限制，無法實現目標幀速率。因此，需要改進圖像處理技術以最小化資源限制對幀質量的影響。

發明內容

在一個實施例中，提供了一種用于增強幀序列的質量的方法。該方法包括第一級電路當檢測到系統資源的特定狀況時，調整待輸出的幀序列的質量并輸出具有質量劣化的幀序列，所述幀序列的質量劣化包括不均勻的分辨率和不均勻的每秒幀數FPS中的至少一個。其中系統資源的特定狀況可以指剩余的系統資源不足，其中，系統資源的特定狀況可以表示系統資源的使用量超過第一閾值，或者系統資源的剩余量低于第二閾值。該方法還包括提升引擎從第一級電路接收幀序列，并基于該幀序列產生增強的幀序列以用于傳輸到第二級電路。其中，不均勻的分辨率表示在幀序列中至少兩個幀采用不同的分辨率，不均勻的FPS表示在幀序列中包括以不同的FPS得到的幀。

在另一個實施例中，一種系統用于增強幀序列的質量。該系統包括第一級電路，用于在檢測到系統資源的特定狀況時，調整待輸出的幀序列的質量并輸出具有質量劣化的幀序列，所述幀序列的質量劣化包括不均勻的分辨率和不均勻的每秒幀數FPS中的至少一個。該系統還包括提升引擎，用于從第一級電路接收幀序列，并基于該幀序列生成增強的幀序列以傳輸到第二級電路。

其他方面和特征對于本領域普通技術人員來說在結合附圖閱讀以下具體實施例的描述時將變得顯而易見。

本申請使得第一級電路可以以極大的靈活性降低幀的質量，能夠節省資源(例如第一級電路的帶寬資源、計算資源和/或功率資源等)。

附圖說明

本發明通過示例而非限制的方式在附圖的圖中示出，其中相同的附圖標記指示相似的元件。需要說明的是，本發明中對“一”或“一個”實施例的不同稱謂并不一定是同一個實施例，這樣的稱謂意味著至少一個。此外，當結合實施例描述特定特征、結構或特性時，指的是在本領域技術人員的知識范圍內可以結合其他實施例實現這種特征、結構或特性，無論是否明確描述。

圖1示出根據一些實施例的多個幀序列示例。

圖2是示出根據一個實施例的用于提升幀序列質量的系統的框圖。

圖3是示出根據另一個實施例的用于提升幀序列的質量的系統的框圖。

圖4是示出根據一個實施例的使用先前的增強幀作為參考幀的示例提升引擎操作的示意圖。

圖5是示出根據一個實施例的使用具有比標準質量高的質量的先前幀作為參考幀的示例提升引擎操作的示意圖。

圖6是示出根據一個實施例的用于系統增強幀序列質量的方法的流程圖。

圖7示出了根據一個實施例的示例設備。

圖8示出了根據另一個實施例的示例設備。

圖9示出了根據一個實施例的示例系統。

具體實施方式