[發明專利]直播互動方法、裝置、存儲介質與電子設備

在審

• 申請號: 202111107176.3
• 申請日: 2021-09-22
• 公開（公告）號: CN113840177A
• 公開（公告）日: 2021-12-24
• 發明（設計）人: 郭昀霖
• 申請（專利權）人: 廣州博冠信息科技有限公司
• 主分類號: H04N21/4788
• 分類號: H04N21/4788;H04L29/06
• 代理公司: 北京律智知識產權代理有限公司 11438
• 代理人: 王輝;闞梓瑄

本公開提供了一種直播互動方法、裝置、存儲介質與電子設備，涉及圖像處理技術領域。直播互動方法包括：根據采集的直播視頻流檢測手勢輪廓；通過預先訓練好的，以預先配置的手勢骨骼數據集為先驗條件的手勢識別機器學習模型，對檢測得到的手勢輪廓進行識別，確定手勢輪廓對應的手勢識別結果；基于語義分析確定手勢識別結果對應交互功能的觸發指令；將手勢識別結果對應交互功能的觸發指令及直播視頻流通過直播服務器發送至觀眾終端，以使觀眾終端在播放直播視頻流時，根據觸發指令執行對應的交互功能。本公開以預先配置的手勢骨骼數據集為先驗條件，通過訓練好的機器學習模型識別直播視頻流的手勢，提高了直播互動過程中手勢識別的精準度和效率。

技術領域

本公開涉及圖像處理技術領域，尤其涉及一種直播互動方法、裝置、存儲介質與電子設備。

背景技術

隨著互聯網的發展和在線影音平臺的興起，網絡直播已經成為一種十分受歡迎的即時影音娛樂形式。

在網絡直播過程中，觀眾可以通過觀眾終端觀看主播的直播內容，并通過文字或者贈送虛擬禮物等方式與主播進行互動，主播在接收到觀眾贈送的虛擬禮物后，可以對觀眾表示感謝，通常情況下，主播可以通過語言方式與觀眾進行互動，對觀眾進行感謝。

發明內容

本公開提供了一種直播互動方法、裝置、存儲介質與電子設備，進而提高直播互動中手勢識別的精準度和效率。

根據本公開的第一方面，提供一種直播互動方法，應用于主播終端，所述方法包括：

根據采集的直播視頻流檢測手勢輪廓；

通過預先訓練好的，以預先配置的手勢骨骼數據集為先驗條件的手勢識別機器學習模型，對檢測得到的手勢輪廓進行識別，確定手勢輪廓對應的手勢識別結果；

基于語義分析確定手勢識別結果對應交互功能的觸發指令；

將手勢識別結果對應交互功能的觸發指令及直播視頻流通過直播服務器發送至觀眾終端，以使觀眾終端在播放直播視頻流時，根據觸發指令執行對應的交互功能。

根據本公開的第二方面，還提供一種直播互動方法，應用于觀眾終端，所述方法包括：

接收主播終端通過直播服務器發送的，手勢識別結果對應交互功能的觸發指令及直播視頻流；其中，所述手勢識別結果對應交互功能的觸發指令是所述主播終端，根據采集的直播視頻流檢測手勢輪廓；通過預先訓練好的，以預先配置的手勢骨骼數據集為先驗條件的手勢識別機器學習模型，對檢測得到的手勢輪廓進行識別，確定手勢輪廓對應的手勢識別結果，并對所述手勢輪廓對應的手勢識別結果進行語義分析確定的；

在播放直播視頻流時，根據手勢識別結果對應交互功能的觸發指令執行對應的交互功能。

根據本公開的第三方面，還提供一種直播互動裝置，應用于主播終端，所述裝置包括：

檢測模塊，被配置為根據采集的直播視頻流檢測手勢輪廓；

識別模塊，被配置為通過預先訓練好的，以預先配置的手勢骨骼數據集為先驗條件的手勢識別機器學習模型，對檢測得到的手勢輪廓進行識別，確定手勢輪廓對應的手勢識別結果；

確定模塊，被配置為基于語義分析確定手勢識別結果對應交互功能的觸發指令；

發送模塊，被配置為將手勢識別結果對應交互功能的觸發指令及直播視頻流通過直播服務器發送至觀眾終端，以使觀眾終端在播放直播視頻流時，根據觸發指令執行對應的交互功能。

根據本公開的第四方面，還提供一種直播互動裝置，應用于觀眾終端，所述裝置包括：

檢測模塊，被配置為根據采集的直播視頻流檢測手勢輪廓；