[發明專利]一種視頻處理方法、系統及視頻直播系統

在審

• 申請號: 202110233097.0
• 申請日: 2021-03-03
• 公開（公告）號: CN113014944A
• 公開（公告）日: 2021-06-22
• 發明（設計）人: 何亮;鮑國敏
• 申請（專利權）人: 上海七牛信息技術有限公司
• 主分類號: H04N21/2187
• 分類號: H04N21/2187;H04N21/234;H04N21/235;G06F16/783
• 代理公司: 上海碩力知識產權代理事務所(普通合伙) 31251
• 代理人: 郭桂峰

本發明公開一種視頻處理方法、系統及視頻直播系統，包括：S1：獲取視頻幀，識別視頻幀中的視角對象；S2：從視頻幀中提取所述視角對象的視角信息，封裝為視角參數；S3：將所述視角參數添加到所述視頻幀中。本發明還公開一種視頻處理系統和一種視頻直播系統，本發明的方法和系統，在視頻流分發同時對傳輸畫面進行進一步分析和信息提取，以使系統在播放器解碼階段可以在解碼視頻幀的同時具有對視頻畫面進行進一步處理和渲染，實現推拉流端的后續處理和功能拓展,提高了直播觀看體驗，提高了系統的擴展性，因此具有明顯的技術優勢和有益效果。

技術領域

本發明涉及直播服務領域，尤其涉及一種視頻處理方法、系統及視頻直播系統。

背景技術

目前國內外各家視頻播放器廠商都愈加重視用戶的定制化需求，對于同一個視頻，在分辨率超高的情況下，一方面往往對于細節的呈現效果并不理想，另一方面每個用戶對于希望重點獲取的圖像范圍都不盡相同。為了滿足觀眾更加廣泛的視角的選擇，可以看到在一些體育賽事直播中還出現了多機位拍攝視角通過不同視頻流的形式傳遞，或者人為切換相機視角，供用戶選擇一個或多個進行觀看的方案，然而現有技術方案至少存在以下缺陷：

(1)供選擇的視角有限，無法滿足用戶任意選擇視角觀看的需求；

(2)同時傳輸多路視頻流，增加了傳輸的壓力和額外的視頻傳輸成本；

(3)無法適應播放器端和推流端的需求變化，可擴展性差。

發明內容

本發明為解決現有技術中存在的上述缺陷，提出一種視頻處理解決方案，目的是通過該解決方案，可以基于現有傳統的視頻流提供豐富的視角信息，通過這些視角信息，可以滿足用戶個性化的視角觀看需求，同時該方案也能滿足較低的傳輸壓力和傳輸成本，具有良好的擴展性，可以適應播放器端和推流端的需求變換。

為了實現以上目的，本發明提出了一種視頻處理方法，包括：

S1：獲取視頻幀，識別視頻幀中的視角對象；

S2：從視頻幀中提取所述視角對象的視角信息，封裝為視角參數；

S3：將所述視角參數添加到所述視頻幀中。

進一步地，所述視角對象包括人物、活動物品、區域。

進一步地，所述視角信息包括視角對象名、視角對象的坐標。

進一步地，所述視角對象的坐標包括左上角、左下角、右上角、右下角圍成的矩形區域坐標。

進一步地，所述視角對象的坐標是相對坐標。

進一步地，所述步驟S3中，具體實現步驟是：將所述視角參數添加到所述視頻幀的頭部SEI字段中。

進一步地，在所述步驟S3中，將視角參數填充到SEI的user data字段中。

進一步地，所述視角參數的數據格式為json格式。

本發明還公開一種視頻處理系統，包括：視角對象識別模塊，視角信息提取模塊，視角信息填充模塊，其中：

視角對象識別模塊：用于提取視頻幀并識別視頻幀中的視角對象；

視角信息提取模塊：用于從視頻幀中提取所述視角對象的視角信息，封裝為視角參數；

視角信息填充模塊：用于將所述視角參數添加到所述視頻幀中。

本發明還公開一種視頻直播系統，包括直播cdn分發系統、視頻采集終端、視頻處理系統、視頻轉碼系統以及視頻播放終端，其中，所述直播cdn分發系統用以接收直播視頻流并分發，所述視頻采集終端用以用于采集直播視頻源的數據，所述視頻轉碼系統用以對視頻幀進行轉碼處理，所述視頻播放終端用以播放和展示視頻，所述視頻處理系統為上述視頻處理系統。