[發(fā)明專利]進(jìn)行直播的方法、裝置、終端和存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 201910716907.0
• 申請日: 2019-08-05
• 公開（公告）號: CN110312144B
• 公開（公告）日: 2022-05-24
• 發(fā)明（設(shè)計(jì)）人: 王云;楊泉宇;彭浩浩;余彬彬;寧華龍
• 申請（專利權(quán)）人: 廣州方硅信息技術(shù)有限公司
• 主分類號: H04N21/2187
• 分類號: H04N21/2187;H04N21/4788;H04N21/44;G06V40/20;G06T13/40
• 代理公司: 北京三高永信知識產(chǎn)權(quán)代理有限責(zé)任公司 11138
• 代理人: 邢少真

1.一種進(jìn)行直播的方法，其特征在于，所述方法應(yīng)用在連麥直播過程中的第一終端，所述方法包括：

檢測到斗舞指令時，通過服務(wù)器向第二終端發(fā)起斗舞邀請，所述斗舞邀請用于所述服務(wù)器指示所述第一終端和所述第二終端開啟斗舞模式，以使所述第一終端和所述第二終端加載預(yù)先存儲的斗舞舞臺場景，其中，開啟所述斗舞模式時，所述第二終端停止繼續(xù)上傳主播用戶的視頻幀，并識別所述視頻幀中第二連麥人物的骨骼特征點(diǎn)的三維位置信息，上傳所述第二連麥人物的骨骼特征點(diǎn)的三維位置信息；

通過圖像拍攝部件采集第一連麥人物的視頻幀；

識別所述第一連麥人物的視頻幀中的骨骼特征點(diǎn)，確定所述第一連麥人物的骨骼特征點(diǎn)的三維位置信息；

接收所述服務(wù)器發(fā)送的所述第二連麥人物的骨骼特征點(diǎn)的三維位置信息；

基于所述第一連麥人物的骨骼特征點(diǎn)的三維位置信息，確定所述第一連麥人物對應(yīng)的第一人物動畫視頻幀，基于所述第二連麥人物的骨骼特征點(diǎn)的三維位置信息，確定所述第二連麥人物對應(yīng)的第二人物動畫視頻幀；

將所述第一人物動畫視頻幀和所述第二人物動畫視頻幀進(jìn)行合成，將其中的所述第一連麥人物的人物動畫模型、所述第二連麥人物的人物動畫模型同時疊加在同一斗舞舞臺場景中，得到本地連麥直播的直播視頻幀，向所述服務(wù)器發(fā)送所述直播視頻幀；

所述確定所述第一連麥人物的骨骼特征點(diǎn)的三維位置信息之后，所述方法還包括：

將所述第一連麥人物的骨骼特征點(diǎn)的三維位置信息發(fā)送至所述第二終端，以使所述第二終端基于所述第一連麥人物的骨骼特征點(diǎn)的三維位置信息，確定所述第一連麥人物對應(yīng)的第一人物動畫視頻幀，基于所述第二連麥人物的骨骼特征點(diǎn)的三維位置信息，確定所述第二連麥人物對應(yīng)的第二人物動畫視頻幀；將所述第一人物動畫視頻幀和所述第二人物動畫視頻幀進(jìn)行合成，將其中的所述第一連麥人物的人物動畫模型、所述第二連麥人物的人物動畫模型同時疊加在同一斗舞舞臺場景中得到第二直播視頻幀，播放所述第二直播視頻幀。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述圖像拍攝部件包括深度圖像拍攝部件，所述通過圖像拍攝部件采集第一連麥人物的視頻幀，包括：

通過所述深度圖像拍攝部件采集第一連麥人物的三維視頻幀；

所述識別所述第一連麥人物的視頻幀中的骨骼特征點(diǎn)，確定所述第一連麥人物的骨骼特征點(diǎn)的三維位置信息，包括：

識別所述第一連麥人物的三維視頻幀中的骨骼特征點(diǎn)；

在所述第一連麥人物的三維視頻幀包括的各像素點(diǎn)的三維位置信息中，確定所述第一連麥人物的骨骼特征點(diǎn)的三維位置信息。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于所述第一連麥人物的骨骼特征點(diǎn)的三維位置信息，確定所述第一連麥人物對應(yīng)的第一人物動畫視頻幀，包括：

基于所述第一連麥人物的骨骼特征點(diǎn)的三維位置信息，確定所述第一連麥人物的至少一組骨骼特征點(diǎn)對應(yīng)的位姿信息，其中，每組骨骼特征點(diǎn)包括兩個預(yù)設(shè)類型的骨骼特征點(diǎn)；

基于所述第一連麥人物的至少一組骨骼特征點(diǎn)對應(yīng)的位姿信息，確定所述第一連麥人物對應(yīng)的第一人物動畫視頻幀；

所述基于所述第二連麥人物的骨骼特征點(diǎn)的三維位置信息，確定所述第二連麥人物對應(yīng)的第二人物動畫視頻幀，包括：

基于所述第二連麥人物的骨骼特征點(diǎn)的三維位置信息，確定所述第二連麥人物的至少一組骨骼特征點(diǎn)對應(yīng)的位姿信息；

基于所述第二連麥人物的至少一組骨骼特征點(diǎn)對應(yīng)的位姿信息，確定所述第二連麥人物對應(yīng)的第二人物動畫視頻幀。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述基于所述第一連麥人物的至少一組骨骼特征點(diǎn)對應(yīng)的位姿信息，確定所述第一連麥人物對應(yīng)的第一人物動畫視頻幀，包括：

獲取第一初始人物動畫模型，其中，所述第一初始人物動畫模型包括至少一個模型組件；

基于所述第一連麥人物的至少一組骨骼特征點(diǎn)對應(yīng)的位姿信息、以及預(yù)先存儲的模型組件和多組骨骼特征點(diǎn)之間的對應(yīng)關(guān)系，對所述第一初始人物動畫模型中各模型組件的初始位姿信息進(jìn)行調(diào)整，得到所述第一連麥人物對應(yīng)的第一人物動畫模型；

基于所述第一人物動畫模型，確定所述第一連麥人物對應(yīng)的第一人物動畫視頻幀。