[發明專利]一種綠幕圖像與虛擬圖像實時合成的方法和裝置

在審

• 申請號: 202011359211.6
• 申請日: 2020-11-27
• 公開（公告）號: CN112488972A
• 公開（公告）日: 2021-03-12
• 發明（設計）人: 朱克鋒
• 申請（專利權）人: 深圳卡多?？萍加邢薰?/a>
• 主分類號: G06T5/50
• 分類號: G06T5/50;G06T7/90;G06N3/08;G06K9/62
• 代理公司: 深圳市智勝聯合知識產權代理有限公司 44368
• 代理人: 齊文劍

本發明涉及圖像處理技術領域，特別是涉及一種綠幕圖像與虛擬圖像實時合成的方法和裝置，其中方法包括，獲取當前幀綠幕圖像數據；提取所述當前幀綠幕圖像數據中每一像素點的亮度分量Y、色度分量UV，通過預設轉換算法確定與所述亮度分量Y、色度分量UV對應的不透明度其中，與所述綠幕圖像相對應的虛擬圖像的每一像素點的不透明度為的范圍為0～1；根據所述不透明度與所述不透明度的比例將所述綠幕圖像和所述虛擬圖像進行合成；發送所述綠幕圖像和所述虛擬圖像進行合成后的圖像數據，極大的縮短了合成時間，在有限的時間內保證了合成精度。

技術領域

本發明涉及圖像處理技術領域，特別是涉及一種綠幕圖像與虛擬圖像實時合成的方法和裝置。

背景技術

隨著視頻技術向數字化、多媒體方向發展，人們對視覺感官的需求不斷提高，以虛擬視頻為代表的視頻對象提取技術逐漸展現出了廣闊的應用前景。

最廣為應用的便是摳像技術，通俗可以理解為將畫面當中某一部分的顏色與背景進行分離，進而創建前景遮罩，將前景遮罩與虛擬圖像通過合成后形成已摳像目標在虛擬環境中活動的圖像。

而傳統的摳像技術中，視頻流中的每幀圖像通常為YUV格式，在摳像的過程中往往需要將YUV格式轉換為RGB格式，然后再進行摳像處理，現有的將YUV格式的數據流轉換為RGB處理的數據量較大，處理時間慢，難以適應實時視頻中的綠幕合成處理。

發明內容

鑒于上述問題，提出了本發明實施例以便提供一種克服上述問題或者至少部分地解決上述問題的一種綠幕圖像與虛擬圖像實時合成的方法和裝置。

為了解決上述問題，本發明實施例公開了一種綠幕圖像與虛擬圖像實時合成的方法，其特征在于，包括：

獲取當前幀綠幕圖像數據；

提取所述當前幀綠幕圖像數據中每一像素點的亮度分量Y、色度分量UV，通過預設轉換算法確定與所述亮度分量Y、色度分量UV對應的不透明度其中，與所述綠幕圖像相對應的虛擬圖像的每一像素點的不透明度為的范圍為0～1；

根據所述不透明度與所述不透明度的比例將所述綠幕圖像和所述虛擬圖像進行合成；

發送所述綠幕圖像和所述虛擬圖像進行合成后的圖像數據

進一步地，所述提取所述當前幀綠幕圖像數據中每一像素點的亮度分量Y、色度分量UV，之前，包括：

構建圖像訓練數據集，對所述圖像訓練數據集中的所有圖像進行圖像處理，得到所有圖像中每一像素點的像素值和對應的不透明度α，將每一像素點的像素值和對應的不透明度α作為圖像訓練數據集的訓練數據；

通過預設的相關性函數對所述每一像素點的像素值和對應的不透明度α進行訓練，確定加權平均后的關聯參數λ₁～λ₉，得到所述像素值和對應的不透明度α之間的相關性函數。

進一步地，所述轉換算法為：

進一步地，所述根據所述不透明度與所述不透明度的比例將所述綠幕圖像和所述虛擬圖像進行合成，包括：

將所述綠幕圖像中的每一像素點與所述虛擬圖像中的每一像素點一一對應，通過以下公式計算所述綠幕圖像和所述虛擬圖像相對應的像素點中的不透明度的比例；