[發明專利]視頻顯示控制方法及其裝置、設備、介質、產品

在審

• 申請號: 202310084572.1
• 申請日: 2023-01-18
• 公開（公告）號: CN116095355A
• 公開（公告）日: 2023-05-09
• 發明（設計）人: 包佳晶
• 申請（專利權）人: 百果園技術（新加坡）有限公司
• 主分類號: H04N21/2187
• 分類號: H04N21/2187;H04N21/234;H04N21/2343;H04N21/44;H04N21/4402
• 代理公司: 廣州利能知識產權代理事務所(普通合伙) 44673
• 代理人: 王增鑫

1.一種視頻顯示控制方法，其特征在于，包括：

獲取直播視頻流，所述直播視頻流中包含多個圖像幀及其目標質量指標；

根據所述圖像幀的編碼分辨率及其相應的目標質量指標確定所述圖像幀的縮放操作相對應的接口類型，所述接口類型為硬件接口類型或軟件接口類型；

調用所述接口類型相對應的縮放接口對所述圖像幀進行縮放操作后渲染顯示到直播間界面的視頻播放窗口中。

2.根據權利要求1所述的視頻顯示控制方法，其特征在于，根據所述圖像幀的編碼分辨率及其相應的目標質量指標確定所述圖像幀的縮放操作相對應的接口類型，包括：

將所述圖像幀的目標質量指標輸入分辨率預測模型確定出理想分辨率；

應用預設轉換公式計算出所述圖像幀在其既有目標質量指標下需要基于其編碼分辨率縮放達到的目標分辨率。

比較所述目標分辨率與所述理想分辨率的大小，當所述目標分辨率大于所述理想分辨率時，確定所述圖像幀的縮放操作的接口類型為硬件接口類型，否則為軟件接口類型。

3.根據權利要求1所述的視頻顯示控制方法，其特征在于，根據所述圖像幀的編碼分辨率及其相應的目標質量指標確定所述圖像幀的縮放操作相對應的接口類型，包括：

基于所述圖像幀的編碼分辨率，在預設的接口映射表中查詢出所述編碼分辨率相對應的映射子集，所述映射子集包含不同目標質量指標及其相適配的接口類型；

基于所述圖像幀的目標質量指標，從所述映射子集中查詢出與所述目標質量指標相對應的接口類型。

4.根據權利要求1至3中任意一項所述的視頻顯示控制方法，其特征在于，調用所述接口類型相對應的縮放接口對所述圖像幀進行縮放操作后渲染顯示到直播間界面的視頻播放窗口中，包括：

當所述接口類型為硬件接口類型時，調用硬件縮放接口對所述圖像幀進行縮放操作；

當所述接口類型為軟件接口類型時，調用軟件縮放接口對所述圖像幀進行縮放操作；

將縮放操作后的所述圖像幀渲染顯示到直播間界面的視頻播放窗口中。

5.根據權利要求4所述的視頻顯示控制方法，其特征在于，當所述接口類型為軟件接口類型時，調用軟件縮放接口對所述圖像幀進行縮放操作，包括：

判斷所述圖像幀的縮放比率是否為二倍率，當為二倍率時，采用第一軟件縮放接口實施對所述圖像幀的縮放操作以消除所述圖像幀在縮放過程中產生的摩爾紋，所述縮放比率為所述圖像幀的目標分辨率與編碼分辨率的比值；

當所述縮放比率為非二倍率時，判斷當前設備所屬的硬件算力等級，根據硬件算力等級調用相應等級的軟件縮放接口實施對所述圖像幀的縮放操作。

6.根據權利要求1至3中任意一項所述的視頻顯示控制方法，其特征在于，將縮放操作后的所述圖像幀渲染顯示到直播間界面的視頻播放窗口中之前，包括：

判斷縮放操作后的所述圖像幀是否超出所述視頻播放窗口的邊界，當超過所述邊界時，對所述圖像幀進行人臉檢測以確定出人臉區域；

以所述人臉區域為中心對所述圖像幀進行裁剪，使所述圖像幀的尺寸適配所述視頻播放窗口的尺寸。

7.根據權利要求1至3中任意一項所述的視頻顯示控制方法，其特征在于，獲取直播視頻流之前，包括：

確定當前圖像幀的主觀評估參數，所述主觀評估參數包括適于對當前圖像幀編碼的參考分辨率，及按照所述參考分辨率編碼可預期獲得的主觀質量指標；

將編碼器的出口帶寬輸入參數優化模型，獲得所述出口帶寬下表征編碼分辨率與目標質量指標之間映射關系的近似函數；

應用所述近似函數求取所述主觀評估參數相對應的數值逼近點，獲得所述數值逼近點相對應的編碼分辨率和目標質量指標；

將所述目標質量指標作為所述當前圖像幀相對應的附加增強信息，按照所述編碼分辨率將所述當前圖像幀編碼到直播視頻流中推送至直播間。