[發明專利]直播彈幕的處理方法、模型、電子裝置及計算機存儲介質

在審

• 申請號: 202110302717.1
• 申請日: 2021-03-22
• 公開（公告）號: CN113132744A
• 公開（公告）日: 2021-07-16
• 發明（設計）人: 司季雨;吳曉東;張廣乾;章焱;程凱常
• 申請（專利權）人: 廣州虎牙科技有限公司
• 主分類號: H04N21/2187
• 分類號: H04N21/2187;H04N21/431;H04N21/4788
• 代理公司: 深圳市威世博知識產權代理事務所(普通合伙) 44280
• 代理人: 黎堅怡

1.一種直播彈幕的處理方法，其特征在于，所述方法包括：

獲取到直播視頻的視頻幀；

通過深度學習網絡對所述視頻幀進行分類處理，得到包括第一目標圖像的第一畫面；

對所述第一目標圖像進行定位，得到至少一個第一目標圖像的位置信息；

利用所述第一目標圖像的位置信息對第二目標圖像進行定位，得到所述第二圖像的位置信息；

基于所述第一圖像的位置信息和所述第二圖像的位置信息確定目標區域的輪廓信息；

通過所述直播畫面的所述目標區域之外的區域顯示彈幕信息。

2.根據權利要求1所述的直播彈幕的處理方法，其特征在于，所述對所述第一圖標圖像進行定位，得到所述第一圖像的位置信息的步驟，包括：

對至少一個所述第一目標圖像進行檢測，得到至少一個所述第一目標圖像的第一邊框；

所述利用所述第一目標圖像的位置信息對第二目標圖像進行定位，得到所述第二圖像的位置信息的步驟，具體包括：

將所述第一邊框按照設定方向進行擴大，得到所述包括所述第二圖像的第二邊框；

所述基于所述第一圖像的位置信息和所述第二圖像的位置信息確定目標區域的輪廓信息的步驟，包括：

利用所述第二邊框確定目標區域的輪廓信息。

3.根據權利要求2所述的直播彈幕的處理方法，其特征在于，所述利用所述第一目標圖像的位置信息對第二目標圖像進行定位，得到所述第二圖像的位置信息的步驟，還包括：

利用所述第一目標圖像的位置信息對所述第一目標圖像進行定位，得到所第一圖像的位置信息。

4.根據權利要求1所述的直播彈幕的處理方法，其特征在于，所述對所述第一目標圖像進行定位，得到至少一個所述第一圖像的位置信息的步驟，包括：

通過目標檢測方法對所述第一目標圖像進行定位，得到至少一個所述第一圖像的位置信息。

5.根據權利要求1所述的直播彈幕的處理方法，其特征在于，所述基于所述第一圖像的位置信息和所述第二圖像的位置信息確定目標區域的輪廓信息之后的步驟，包括：

通過預設算法對所述目標區域的輪廓信息進行膨脹腐蝕處理，得到平滑化的目標區域的輪廓信息。

6.根據權利要求5所述的直播彈幕的處理方法，其特征在于，所述通過預設算法對所目標區域的輪廓信息進行膨脹腐蝕處理，得到平滑化的目標區域的輪廓信息之后的步驟，包括：

記錄前n幀的所述目標區域的輪廓信息，并與當前幀的所述目標區域的輪廓信息進行幀間平滑處理，得到輸出的所述目標區域的輪廓信息。

7.根據權利要求1所述的直播彈幕的處理方法，其特征在于，所述通過所述直播畫面的所述目標區域之外的區域顯示彈幕信息的步驟，包括：

對所述目標區域的輪廓信息進行壓縮編碼，得到所述目標區域的輪廓數據結構；

將所述目標區域的輪廓數據結構與所述直播視頻的視頻幀進行對齊處理，并渲染彈幕，以通過所述直播畫面的所述目標區域之外的區域顯示彈幕信息。

8.根據權利要求1～7任一項所述的直播彈幕的處理方法，其特征在于，所述直播視頻包括直播游戲視頻；

所述通過深度學習網絡對所述視頻幀進行分類處理，得到包括第一目標圖像的第一畫面的步驟，包括：

通過所述深度學習網絡對所述視頻幀進行分類處理，得到包括被控角色的狀態條的游戲畫面；

所述對所述第一目標圖像進行定位，得到至少一個所述第一圖像的位置信息的步驟包括：

對各個所述狀態條進行定位，得到各個所述狀態條的位置信息；

所述利用所述第一目標圖像的位置信息對第二目標圖像進行定位，得到所述第二圖像的位置信息的步驟，包括：

利用所述狀態條的位置信息對所述被控對象進行定位，得到所述被控對象的位置信息；

所述基于所述第一圖像的位置信息和所述第二圖像的位置信息確定目標區域的輪廓信息的步驟，包括：

基于所述狀態條的位置信息和所述被控對象的位置信息確定目標區域的輪廓信息。