[發明專利]改善視頻清晰度的方法、裝置、設備及存儲介質

在審

• 申請號: 202310212368.3
• 申請日: 2023-02-27
• 公開（公告）號: CN116208730A
• 公開（公告）日: 2023-06-02
• 發明（設計）人: 李清;何睿;于騫
• 申請（專利權）人: 鵬城實驗室
• 主分類號: H04N7/01
• 分類號: H04N7/01;G06T3/40
• 代理公司: 深圳市世紀恒程知識產權代理事務所 44287
• 代理人: 晏波

本申請公開了一種改善視頻清晰度的方法、裝置、設備及存儲介質，該方法包括：基于終端設備發送的視頻請求，確定終端設備的最優計算力與所需視頻，并向終端設備發送基于最優計算力，確定的所需視頻的超分模型與清晰度等級；基于終端設備從清晰度等級中選擇的目標清晰度，從所需視頻中篩選出超分清單，其中，超分清單記載了所需視頻中需要超分的超分圖像塊；將超分清單與視頻塊發送至終端設備，以供終端設備基于超分模型超分超分清單記載的超分圖像塊，得到所需視頻對應的高清視頻。在本申請中，任意一個終端設備都可以獲得滿足自身最優計算力的超分模型，并通過減少需要超分的圖像塊，減少計算量，以使終端設備可以為用戶提供高清質量的視頻。

技術領域

本申請涉及無線通信技術領域，尤其涉及一種改善視頻清晰度的方法、裝置、設備及存儲介質。

背景技術

由于用戶利用終端設備觀看高清視頻的需求與日俱增，但是當前的網絡帶寬受限，導致終端設備不能對用戶提供高質量的視頻。

目前，終端設備在計算能力上進行了加強，以通過加強的計算能力將低清視頻轉化為高清視頻，以使終端設備可以在網絡帶寬受限時，仍然能夠使用戶觀看高清視頻，為了充分利用終端設備中的CPU(central?processing?unit，中央處理器)與GPU(graphicsprocessing?unit，圖像處理器)等資源，降低內存的要求，會使用超分模型，對視頻進行處理，終端設備一般會對視頻進行超分運算。但是，超分模型為深度神經模型，對計算能力的要求高，一些終端設備的計算能力不能滿足超分模型，導致計算能力不滿足超分模型的終端設備，仍然無法為用戶提供高清質量的視頻。

發明內容

本申請的主要目的在于提供一種改善視頻清晰度的方法、裝置、設備及存儲介質，旨在解決現有技術中計算能力不滿足超分模型的終端設備，無法為用戶提供高清質量視頻的技術問題。

為實現上述目的，本申請提供一種改善視頻清晰度的方法，所述改善視頻清晰度的方法包括：

基于終端設備發送的視頻請求，確定所述終端設備的最優計算力與所需視頻，并向所述終端設備發送基于所述最優計算力，確定的所述所需視頻的超分模型與清晰度等級；

基于所述終端設備從所述清晰度等級中選擇的目標清晰度，從所述所需視頻中篩選出超分清單，其中，超分清單記載了所需視頻中需要超分的超分圖像塊；

將所述超分清單與所述視頻塊發送至所述終端設備，以供所述終端設備基于所述超分模型超分所述超分清單記載的超分圖像塊，得到所述所需視頻對應的高清視頻。

可選地，所述基于所述終端設備從所述清晰度等級中選擇的目標清晰度，從所述所需視頻中篩選出超分清單的步驟，包括：

獲取所述所需視頻清晰度為所述目標清晰度的視頻塊；

將所述視頻塊進行低清幀率解碼，獲取每個所述視頻塊的宏塊解碼信息；

基于所述宏塊解碼信息，將所述視頻塊中的圖像塊劃分為幀間圖像塊與幀內圖像塊，并確定所述幀間圖像塊的幀間超分權重與所述幀內圖像塊的幀內超分權重；

基于所述幀間超分權重、所述幀內超分權重與預設的搜索算法，確定所述所需視頻的超分清單。

可選地，所述基于所述宏塊解碼信息，將所述視頻塊中的圖像塊劃分為幀間圖像塊與幀內圖像塊，并確定所述幀間圖像塊的幀間超分權重的步驟，包括：

基于所述宏塊解碼信息，確定每個所述視頻塊內的幀間宏塊；

將含有所述幀間宏塊的圖像塊定義為幀間圖像塊；

計算所述幀間圖像塊之間的依賴程度與誤差擴散度；

基于所述依賴程度與所述誤差擴散度的乘積，將所述幀間圖像塊劃分為多個幀間清單，其中，每劃分一個所述幀間清單需要重新計算剩余所述幀間圖像塊之間的依賴程度與誤差擴散度；