[發明專利]虛擬禮物特效的合成方法和裝置、直播系統

有效

• 申請號: 201910859947.0
• 申請日: 2019-09-11
• 公開（公告）號: CN110536151B
• 公開（公告）日: 2021-11-19
• 發明（設計）人: 楊克敏;陳杰;歐燕雄
• 申請（專利權）人: 廣州方硅信息技術有限公司
• 主分類號: H04N21/2187
• 分類號: H04N21/2187;H04N21/431;H04N21/4402;H04N21/4788;H04N21/485
• 代理公司: 北京市立方律師事務所 11330
• 代理人: 劉延喜

1.一種虛擬禮物特效的合成方法，其特征在于，包括以下步驟：

觀眾客戶端接收直播視頻流數據和目標特效禮物，從所述直播視頻流數據中獲取直播視頻和所述目標特效禮物的合成位置信息；其中，所述合成位置信息包括基于主播客戶端對所述直播視頻進行識別得到的目標特效禮物合成在所述直播視頻上的目標位置；

將所述直播視頻分割為前景圖像層和背景圖像層，并根據目標特效禮物生成至少一個虛擬禮物特效層；

根據所述合成位置信息將各所述虛擬禮物特效層與所述前景圖像層和背景圖像層按照順序進行合成并展示，包括：根據目標特效禮物標識確定各所述虛擬禮物特效層與所述前景圖像層和背景圖像層的優先級；根據所述合成位置信息將各所述虛擬禮物特效層、前景圖像層和背景圖像層按照所述優先級由高到低進行合成并展示。

2.根據權利要求1所述的虛擬禮物特效的合成方法，其特征在于，所述根據所述合成位置信息將各所述虛擬禮物特效層、前景圖像層和背景圖像層按照所述優先級由高到低進行合成并展示的步驟包括：

根據所述合成位置信息將各所述虛擬禮物特效層與所述前景圖像層和背景圖像層按照所述優先級由高到低進行合成，得到特效幀圖像；

將所述特效幀圖像渲染到特效展示區域進行展示。

3.根據權利要求2所述的虛擬禮物特效的合成方法，其特征在于，所述將所述特效幀圖像渲染到特效展示區域進行展示的步驟包括：

在直播窗口上設置特效展示區域；

在播放直播視頻的過程中，在所述特效展示區域同步渲染所述特效幀圖像。

4.根據權利要求1所述的虛擬禮物特效的合成方法，其特征在于，對所述直播視頻分割為前景圖像層和背景圖像層的步驟包括：

從所述直播視頻中獲取當前視頻幀圖像；

將所述當前視頻幀圖像分割為前景區域和背景區域；其中，所述前景區域所在圖層為前景圖像層；所述背景區域所在圖層為背景圖像層。

5.根據權利要求1所述的虛擬禮物特效的合成方法，其特征在于，所述前景圖像層包括直播視頻中的人物區域，所述背景圖像層包括直播視頻中除人物區域外的背景區域。

6.根據權利要求1所述的虛擬禮物特效的合成方法，其特征在于，所述基于主播客戶端對所述直播視頻進行識別得到的目標特效禮物合成在所述直播視頻上的目標位置的步驟包括：

獲取所述直播視頻的當前視頻幀圖像，提取所述當前視頻幀圖像中的人物輪廓關鍵點；

根據所述人物輪廓關鍵點確定特征區域在所述當前視頻幀圖像上對應的目標位置，以在所述目標位置對所述目標特效禮物進行合成。

7.根據權利要求1至6任一項所述的虛擬禮物特效的合成方法，其特征在于，所述目標特效禮物為三維顯示形式的特效禮物。

8.根據權利要求1至6任一項所述的虛擬禮物特效的合成方法，其特征在于，所述合成位置信息包括：人臉信息、人體輪廓信息、手勢信息和人體骨骼信息中的至少一者。

9.一種虛擬禮物特效的合成方法，其特征在于，包括以下步驟：

接收主播客戶端發送的直播視頻流數據；其中，所述直播視頻流數據中包括直播視頻和目標特效禮物的合成位置信息；

將所述直播視頻流數據轉發至觀眾客戶端；其中，所述觀眾客戶端將所述直播視頻分割為前景圖像層和背景圖像層，并根據目標特效禮物生成至少一個虛擬禮物特效層；根據所述合成位置信息將各所述虛擬禮物特效層與所述前景圖像層和背景圖像層按照順序進行合成并展示，包括：根據目標特效禮物標識確定各所述虛擬禮物特效層與所述前景圖像層和背景圖像層的優先級；根據所述合成位置信息將各所述虛擬禮物特效層、前景圖像層和背景圖像層按照所述優先級由高到低進行合成并展示。