[發(fā)明專利]一種綠幕圖像與虛擬圖像實時合成的方法和裝置

在審

• 申請?zhí)枺?/td>: 202011359211.6
• 申請日: 2020-11-27
• 公開（公告）號: CN112488972A
• 公開（公告）日: 2021-03-12
• 發(fā)明（設計）人: 朱克鋒
• 申請（專利權）人: 深圳卡多希科技有限公司
• 主分類號: G06T5/50
• 分類號: G06T5/50;G06T7/90;G06N3/08;G06K9/62
• 代理公司: 深圳市智勝聯(lián)合知識產(chǎn)權代理有限公司 44368
• 代理人: 齊文劍

1.一種綠幕圖像與虛擬圖像實時合成的方法，其特征在于，包括：

獲取當前幀綠幕圖像數(shù)據(jù)；

提取所述當前幀綠幕圖像數(shù)據(jù)中每一像素點的亮度分量Y、色度分量UV，通過預設轉換算法確定與所述亮度分量Y、色度分量UV對應的不透明度其中，與所述綠幕圖像相對應的虛擬圖像的每一像素點的不透明度為的范圍為0～1；

根據(jù)所述不透明度與所述不透明度的比例將所述綠幕圖像和所述虛擬圖像進行合成；

發(fā)送所述綠幕圖像和所述虛擬圖像進行合成后的圖像數(shù)據(jù)。

2.根據(jù)權利要求1所述的方法，其特征在于，所述提取所述當前幀綠幕圖像數(shù)據(jù)中每一像素點的亮度分量Y、色度分量UV，之前，包括：

構建圖像訓練數(shù)據(jù)集，對所述圖像訓練數(shù)據(jù)集中的所有圖像進行圖像處理，得到所有圖像中每一像素點的像素值和對應的不透明度α，將每一像素點的像素值和對應的不透明度α作為圖像訓練數(shù)據(jù)集的訓練數(shù)據(jù)；

通過預設的相關性函數(shù)對所述每一像素點的像素值和對應的不透明度α進行訓練，確定加權平均后的關聯(lián)參數(shù)λ₁～λ₉，得到所述像素值和對應的不透明度α之間的相關性函數(shù)。

3.根據(jù)權利要求1所述的方法，其特征在于，所述轉換算法為：

。

4.根據(jù)權利要求1所述的方法，其特征在于，所述根據(jù)所述不透明度與所述不透明度的比例將所述綠幕圖像和所述虛擬圖像進行合成，包括：

將所述綠幕圖像中的每一像素點與所述虛擬圖像中的每一像素點一一對應，通過以下公式計算所述綠幕圖像和所述虛擬圖像相對應的像素點中的不透明度的比例；

上式中，Y_D、U_D、V_D為合成后的目標的YUV分量，Y_F、U_F、V_F為綠幕圖像中的YUV分量，Y_B、U_B、V_B為虛擬圖像中的YUV分量。

5.根據(jù)權利要求1所述的方法，其特征在于，還包括：

選取所述綠幕圖像中綠色值G大于紅色值R和藍色值B之和的平均值的像素點作為溢色點；

將所述溢色點中紅色值R和藍色值B之和的平均值作為溢色點的綠色值G_D，其中，

6.一種綠幕圖像與虛擬圖像實時合成的裝置，包括：

獲取模塊，用于獲取當前幀綠幕圖像數(shù)據(jù)；

提取模塊，用于提取所述當前幀綠幕圖像數(shù)據(jù)中每一像素點的亮度分量Y、色度分量UV，通過預設轉換算法確定與所述亮度分量Y、色度分量UV對應的不透明度其中，與所述綠幕圖像相對應的虛擬圖像的每一像素點的不透明度為的范圍為0～1；

合成模塊，用于根據(jù)所述不透明度與所述不透明度的比例將所述綠幕圖像和所述虛擬圖像進行合成；

發(fā)送模塊，發(fā)送所述綠幕圖像和所述虛擬圖像進行合成后的圖像數(shù)據(jù)。

7.根據(jù)權利要求6所述的裝置，其特征在于，所述提取模塊，還包括：

構建模塊，構建圖像訓練數(shù)據(jù)集，對所述圖像訓練數(shù)據(jù)集中的所有圖像進行圖像處理，得到所有圖像中每一像素點的像素值和對應的不透明度α，將每一像素點的像素值和對應的不透明度α作為圖像訓練數(shù)據(jù)集的訓練數(shù)據(jù)；

計算模塊，通過預設的相關性函數(shù)對所述每一像素點的像素值和對應的不透明度α進行訓練，確定加權平均后的關聯(lián)參數(shù)λ₁～λ₉，得到所述像素值和對應的不透明度α之間的相關性函數(shù)。