[發(fā)明專利]直播方法、裝置、終端及存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 202011592216.3
• 申請(qǐng)日: 2020-12-29
• 公開(kāi)（公告）號(hào): CN112752149B
• 公開(kāi)（公告）日: 2023-06-06
• 發(fā)明（設(shè)計(jì)）人: 付敏
• 申請(qǐng)（專利權(quán)）人: 廣州繁星互娛信息科技有限公司
• 主分類(lèi)號(hào): H04N21/44
• 分類(lèi)號(hào): H04N21/44;H04N21/439;H04L65/60;H04N21/4788;G06V40/10
• 代理公司: 北京三高永信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11138
• 代理人: 郭翱杰

1.一種直播方法，其特征在于，所述方法包括：

獲取第一圖像流數(shù)據(jù)；

在識(shí)別出所述第一圖像流數(shù)據(jù)中人物的身體姿態(tài)為預(yù)設(shè)身體姿態(tài)時(shí)，基于所述預(yù)設(shè)身體姿態(tài)確定虛擬樂(lè)器；

采集所述第一圖像流數(shù)據(jù)中所述人物在第i個(gè)幀段的手勢(shì)變動(dòng)信息，所述i為正整數(shù)；通過(guò)手勢(shì)預(yù)測(cè)模型對(duì)所述第一圖像流數(shù)據(jù)中所述人物在第i個(gè)幀段的手勢(shì)變動(dòng)信息進(jìn)行處理，以預(yù)測(cè)所述第一圖像流數(shù)據(jù)中所述人物在第i+1個(gè)幀段內(nèi)的手勢(shì)變動(dòng)信息；基于所述第一圖像流數(shù)據(jù)中所述人物在第i+1個(gè)幀段內(nèi)的手勢(shì)變動(dòng)信息，和所述虛擬樂(lè)器對(duì)應(yīng)的音頻流數(shù)據(jù)，確定所述虛擬樂(lè)器對(duì)應(yīng)的第二圖像流數(shù)據(jù)，所述第二圖像流數(shù)據(jù)包括所述虛擬樂(lè)器中控制部位的控制狀態(tài)變化情況；

將所述第二圖像流數(shù)據(jù)發(fā)送至推流服務(wù)器。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述預(yù)設(shè)身體姿態(tài)包括預(yù)設(shè)手勢(shì)，所述基于所述預(yù)設(shè)身體姿態(tài)確定虛擬樂(lè)器，包括：

在第一對(duì)應(yīng)關(guān)系中查找所述預(yù)設(shè)手勢(shì)對(duì)應(yīng)的虛擬樂(lè)器，所述第一對(duì)應(yīng)關(guān)系包括不同手勢(shì)與不同虛擬樂(lè)器之間的對(duì)應(yīng)關(guān)系。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述預(yù)設(shè)身體姿態(tài)包括預(yù)設(shè)手勢(shì)和預(yù)設(shè)身體姿勢(shì)，所述基于所述預(yù)設(shè)身體姿態(tài)確定虛擬樂(lè)器，包括：

在第二對(duì)應(yīng)關(guān)系中查找與所述預(yù)設(shè)手勢(shì)、所述預(yù)設(shè)身體姿態(tài)均對(duì)應(yīng)的虛擬樂(lè)器，所述第二對(duì)應(yīng)關(guān)系包括不同手勢(shì)、不同身體姿勢(shì)與不同虛擬樂(lè)器之間的對(duì)應(yīng)關(guān)系。

4.根據(jù)權(quán)利要求1至3任一項(xiàng)所述的方法，其特征在于，所述方法還包括：

獲取所述虛擬樂(lè)器對(duì)應(yīng)的音頻流數(shù)據(jù)；

獲取所述音頻流數(shù)據(jù)對(duì)應(yīng)的手勢(shì)集合；

將所述第一圖像流數(shù)據(jù)中所述人物的手勢(shì)變動(dòng)信息，與所述音頻流數(shù)據(jù)對(duì)應(yīng)的手勢(shì)集合進(jìn)行比對(duì)，得到演奏得分。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述獲取所述音頻流數(shù)據(jù)對(duì)應(yīng)的手勢(shì)集合之后，還包括：

將所述音頻流數(shù)據(jù)對(duì)應(yīng)的手勢(shì)集合的圖像流數(shù)據(jù)發(fā)送至所述推流服務(wù)器。

6.根據(jù)權(quán)利要求1至3任一項(xiàng)所述的方法，其特征在于，所述方法還包括：

獲取所述虛擬樂(lè)器對(duì)應(yīng)的第一音頻；

基于所述虛擬樂(lè)器中控制部位的控制狀態(tài)變化情況獲取第二音頻；

將所述第一音頻與所述第二音頻進(jìn)行比對(duì)，得到演奏得分。

7.一種直播方法，其特征在于，所述方法包括：

顯示直播畫(huà)面；

在識(shí)別出所述直播畫(huà)面中人物的身體姿態(tài)為預(yù)設(shè)身體姿態(tài)時(shí)，基于所述預(yù)設(shè)身體姿態(tài)在所述直播畫(huà)面中顯示虛擬樂(lè)器；

基于所述直播畫(huà)面中所述人物的手勢(shì)變動(dòng)信息，控制所述虛擬樂(lè)器中控制部位的控制狀態(tài)變化，所述虛擬樂(lè)器中控制部位的控制狀態(tài)變化是采集第一圖像流數(shù)據(jù)中所述人物在第i個(gè)幀段的手勢(shì)變動(dòng)信息，所述i為正整數(shù)；通過(guò)手勢(shì)預(yù)測(cè)模型對(duì)所述第一圖像流數(shù)據(jù)中所述人物在第i個(gè)幀段的手勢(shì)變動(dòng)信息進(jìn)行處理，以預(yù)測(cè)所述第一圖像流數(shù)據(jù)中所述人物在第i+1個(gè)幀段內(nèi)的手勢(shì)變動(dòng)信息；基于所述第一圖像流數(shù)據(jù)中所述人物在第i+1個(gè)幀段內(nèi)的手勢(shì)變動(dòng)信息，和所述虛擬樂(lè)器對(duì)應(yīng)的音頻流數(shù)據(jù)確定的；

播放音頻流。

8.根據(jù)權(quán)利要求7所述的方法，其特征在于，所述在所述直播畫(huà)面中顯示虛擬樂(lè)器，包括：

確定用于彈奏所述虛擬樂(lè)器的人體部位；

根據(jù)所述預(yù)設(shè)身體姿態(tài)確定所述虛擬樂(lè)器的尺寸；

按照所述虛擬樂(lè)器的尺寸，在所述直播畫(huà)面中所述人體部位對(duì)應(yīng)的位置處顯示所述虛擬樂(lè)器。

9.根據(jù)權(quán)利要求8所述的方法，其特征在于，所述在所述直播畫(huà)面中顯示所述虛擬樂(lè)器，包括：

在所述直播畫(huà)面上層顯示第一圖層，所述第一圖層包括所述虛擬樂(lè)器，所述第一圖層中除所述虛擬樂(lè)器之外的其他位置的透明度符合預(yù)設(shè)條件。