[發明專利]在影片自動置入虛擬廣告的系統、電腦程序產品及其方法

在審

• 申請號: 202210175393.4
• 申請日: 2022-02-25
• 公開（公告）號: CN116308523A
• 公開（公告）日: 2023-06-23
• 發明（設計）人: 吳升翰;林豐勝;李潤容
• 申請（專利權）人: 財團法人工業技術研究院
• 主分類號: G06Q30/0241
• 分類號: G06Q30/0241;G06V10/774;G06V10/764;H04N21/44;H04N21/81
• 代理公司: 中科專利商標代理有限責任公司 11021
• 代理人: 張博

本發明公開了一種在影片自動置入虛擬廣告的系統，其包含影片片段偵測模塊、背景提取模塊、校正模塊及廣告素材置入模塊。影片片段偵測模塊通過第一訓練模型偵測運動賽事影片的目標片段。背景提取模塊用于執行背景提取，以由目標片段的第一幀的背景提取出第一背景遮罩。校正模塊用于執行攝影機校正，以通過第二訓練模型偵測第一幀與運動賽場模板之間的第一轉換關系。廣告素材置入模塊用于根據第一轉換關系轉換廣告素材，以獲得第一轉換廣告素材，并根據第一背景遮罩執行廣告素材置入，以將第一轉換廣告素材置入至第一幀，以獲得具有置入廣告的第一影像幀。

技術領域

本發明有關于一種在運動賽事影片中自動置入虛擬廣告的系統。本發明還涉及一種在運動賽事影片中自動置入虛擬廣告的電腦程序產品及其方法。

背景技術

在許多場所隨處都可以見到廣告，如商場、廣播電臺、電視、汽車站、火車站、棒球場、足球場、體育場等。廣告可以有效地增加產品的銷售量以增加銷售收益。一般而言，廣告可以分為兩種類型，如插播廣告(in-stream?advertisement)和嵌入廣告(embeddedadvertisement)。其中，插播廣告可能會加入在各種不同的影片中，如電視節目、電視電影(TV?film)等。然而，在插播廣告進行插播時，播放中的影片會因插播廣告而中斷，故可能會影響觀看者欣賞影片的體驗。另外，嵌入式廣告通常是靜態的廣告，因此其廣告效果通常不佳。

發明內容

根據本發明的一個實施例，提出一種在運動賽事影片自動置入虛擬廣告的系統，其包含影片片段偵測模塊、背景提取模塊、校正模塊及廣告素材置入模塊。影片片段偵測模塊通過第一訓練模型偵測運動賽事影片的目標片段。背景提取模塊用于執行背景提取以由目標片段的第一幀的背景提取出第一背景遮罩。校正模塊用于執行攝影機校正以通過第二訓練模型偵測第一幀與運動賽場模板之間的第一轉換關系。廣告素材置入模塊用于根據第一轉換關系轉換廣告素材以獲得第一轉換廣告素材，并根據第一背景遮罩執行廣告素材置入以將第一轉換廣告素材置入至第一幀，以獲得具有置入廣告的第一影像幀。

根據本發明的另一個實施例，提出一種在運動賽事影片自動置入虛擬廣告的方法，其包含下列步驟：通過第一訓練模型偵測運動賽事影片的目標片段；通過第一訓練模型偵測運動賽事影片的目標片段；執行背景提取以由目標片段的第一幀的背景提取出第一背景遮罩；執行攝影機校正以通過第二訓練模型偵測第一幀與運動賽場模板之間的第一轉換關系；根據第一轉換關系轉換廣告素材以獲得第一轉換廣告素材；以及根據第一背景遮罩執行廣告素材置入以將第一轉換廣告素材置入至第一幀，以獲得具有置入廣告的第一影像幀。

根據本發明的有一個實施例，提出一種電腦程序產品，通過一電腦載入后執行下列步驟：通過第一訓練模型偵測運動賽事影片的目標片段；執行背景提取以由目標片段的第一幀的背景提取出第一背景遮罩；執行攝影機校正以通過第二訓練模型偵測第一幀與運動賽場模板之間的第一轉換關系；根據第一轉換關系轉換廣告素材以獲得第一轉換廣告素材；以及根據第一背景遮罩執行廣告素材置入以將第一轉換廣告素材置入至第一幀，以獲得具有置入廣告的第一影像幀。

附圖說明

圖1為本發明的一實施例的在運動賽事影片自動置入虛擬廣告的系統的方塊圖；

圖2為本發明的一實施例的在運動賽事影片自動置入虛擬廣告的系統的第一訓練模型的訓練過程的流程圖；

圖3A～圖3D為本發明的一實施例的在運動賽事影片自動置入虛擬廣告的系統的第一訓練模型的訓練過程的示意圖；

圖4A～圖4B為本發明的一實施例的在運動賽事影片自動置入虛擬廣告的系統的背景提取模塊執行背景提取的示意圖；

圖5為本發明的一實施例的在運動賽事影片自動置入虛擬廣告的系統的第二訓練模型的訓練過程的流程圖；

圖6A～圖6F為本發明的一實施例的在運動賽事影片自動置入虛擬廣告的系統的第二訓練模型的訓練過程的示意圖；