[發明專利]視頻廣告植入方法及系統

在審

• 申請號: 202211083047.X
• 申請日: 2022-09-06
• 公開（公告）號: CN115665439A
• 公開（公告）日: 2023-01-31
• 發明（設計）人: 王燦進
• 申請（專利權）人: 新華智云科技有限公司;新華融合媒體科技發展（北京）有限公司
• 主分類號: H04N21/234
• 分類號: H04N21/234;H04N21/2343;H04N21/81;H04N21/2187;G06T7/269;G06T7/194;G06T7/11;G06T7/254;G06T7/90;G06N3/0464;G06N3/084;G06Q30/0241
• 代理公司: 杭州裕陽聯合專利代理有限公司 33289
• 代理人: 王榧

1.一種視頻廣告植入方法，其特征在于，所述方法包括：

獲取直播流或視頻文件，并將直播流或視頻文件解碼轉化為多張圖像，選取第一幀圖像作為目標圖像；

基于預設顏色或分割網絡模型對目標圖像進行粗分割，生成候選廣告區域；

基于腐蝕處理方法和膨脹處理方法對候選廣告區域進行進行細分割，得到候選廣告植入區域；

依據廣告素材的尺寸，在候選廣告植入區域內選取四個廣告植入區域頂點，生成與廣告素材適配的廣告植入區域；

判斷下一幀圖像是否出現相機運動的情形，當下一幀圖像出現相機運動的情形時，調整廣告植入區域的四個頂點的坐標；

提取在廣告植入區域內的運動前景遮罩，利用運動前景遮罩對所述廣告植入區域進行遮擋；

返回所述判斷下一幀圖像是否出現相機運動的情形。

2.根據權利要求1所述的視頻廣告植入方法，其特征在于，所述基于預設顏色或分割網絡模型對目標圖像進行粗分割，生成候選廣告區域，包括：

將目標圖像中的每個像素點投射入HSV顏色空間，以使每個像素點具有三個屬性值，所述三個屬性值分別為色調屬性值，飽和度屬性值，以及明度屬性值；

獲取第一預設色調屬性閾值，第二預設色調屬性閾值，第一預設飽和度屬性閾值，第二預設飽和度屬性閾值，第一預設明度屬性閾值，以及第二預設明度屬性閾值；

創建候選廣告區域像素點集合；

選取目標圖像中的一個像素點；

判斷所述像素點是否同時滿足色調屬性值大于等于第一預設色調屬性閾值且小于等于第二預設色調屬性閾值，且飽和度屬性值大于等于第一預設飽和度屬性閾值且小于等于第二預設飽和度屬性閾值，且明度屬性值大于等于第一預設明度屬性閾值且小于等于第二預設明度屬性閾值；

若所述像素點同時滿足色調屬性值大于等于第一預設色調屬性閾值且小于等于第二預設色調屬性閾值，且飽和度屬性值大于等于第一預設飽和度屬性閾值且小于等于第二預設飽和度屬性閾值，且明度屬性值大于等于第一預設明度屬性閾值且小于等于第二預設明度屬性閾值，則將所述像素點納入所述候選廣告區域像素點集合；

返回選取目標圖像中的一個像素點，直至目標圖像中所述像素點均被選取過；

提取所述候選廣告區域像素點集合中的所有像素點，組成候選廣告區域。

3.根據權利要求1所述的視頻廣告植入方法，其特征在于，所述基于預設顏色或分割網絡模型對目標圖像進行粗分割，生成候選廣告區域，包括：

將目標圖像輸入至分割網絡模型，運行分割網絡模型，獲取分割網絡模型輸出的候選廣告區域。

4.根據權利要求3所述的視頻廣告植入方法，其特征在于，在所述獲取直播流或視頻文件，并將直播流或視頻文件解碼轉化為多張圖像，選取第一幀圖像作為目標圖像之前，還包括：

獲取多個視頻場地圖像，多個視頻場地圖像在多個不同的相機位置拍攝；

對每一個視頻場地圖像標注廣告牌區域，生成多個標注后的視頻場地圖像；

將多個標注后的視頻場地圖像作為訓練數據對分割網絡模型進行訓練。

5.根據權利要求1所述的視頻廣告植入方法，其特征在于，所述基于腐蝕處理方法和膨脹處理方法對候選廣告區域進行進行細分割，得到候選廣告植入區域，包括：

對候選廣告區域采用大小為α的核進行腐蝕處理，得到腐蝕后區域；

對候選廣告區域采用大小為α的核進行膨脹處理，得到膨脹后區域；

計算腐蝕后區域和膨脹后區域的重疊區域；

對重疊區域使用canny算子進行邊緣檢測，得到重疊區域邊緣；

對重疊區域邊緣進行hough變換，得到四條相互垂直的直線；

將四條相互垂直的直線產生的四個交點作為候選廣告植入區域的四個頂點；

將候選廣告植入區域的四個頂點包圍的區域作為后續廣告植入區域。

6.根據權利要求1所述的視頻廣告植入方法，其特征在于，所述依據廣告素材的尺寸，在候選廣告植入區域內選取四個廣告植入區域頂點，生成與廣告素材適配的廣告植入區域，包括：

將候選廣告植入區域進行裁剪，將裁剪得到的區域作為廣告植入區域；

分別記錄廣告植入區域的四個廣告植入區域頂點的坐標。