[發明專利]數據處理方法、系統、電子設備、服務端及客戶端設備

在審

• 申請號: 202011399518.9
• 申請日: 2020-12-01
• 公開（公告）號: CN114584824A
• 公開（公告）日: 2022-06-03
• 發明（設計）人: 卜瑞;曹金明;李揚彥
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: H04N21/431
• 分類號: H04N21/431;H04N21/4788;H04N21/488
• 代理公司: 北京太合九思知識產權代理有限公司 11610
• 代理人: 柴艷波;劉戈

1.一種數據處理方法，其特征在于，包括：

確定視頻中的第一對象；

獲取與所述第一對象關聯的顯示元素；

獲取所述第一對象在所述視頻的播放畫面上的第一位置；

根據所述第一位置，所述顯示元素跟隨所述第一對象顯示在所述視頻的播放畫面上。

2.根據權利要求1所述的方法，其特征在于，確定所述視頻中的第一對象，包括：

響應于用戶通過交互界面觸發的對象選擇事件，獲取用戶選擇對象對應的圖片；基于所述圖片，檢測所述視頻中與所述圖片匹配的所述第一對象；或者

響應于用戶在所述視頻播放畫面上的操作，獲取所述播放畫面上用戶操作位置處的畫面內容，將所述畫面內容作為所述第一對象。

3.根據權利要求2所述的方法，其特征在于，獲取與所述第一對象關聯的顯示元素，包括：

響應于用戶針對所述第一對象觸發的輸入事件，獲取用戶輸入的所述顯示元素；或者

響應于用戶針對所述第一對象觸發的語音輸入，對用戶輸入的語音信息進行自然語言處理，根據自然語言處理結果，確定所述顯示元素。

4.根據權利要求3所述的方法，其特征在于，還包括：

根據所述輸入事件針對的所述視頻中幀圖像的幀標識，確定所述顯示元素的顯示時機；

根據所述第一對象在所述視頻的播放畫面上的第一位置，確定所述顯示元素的跟隨軌跡；

將所述顯示元素、所述顯示時機及所述跟隨軌跡作為所述視頻的附加顯示信息發送至服務端，以便至少一個客戶端在播放所述視頻時獲取。

5.根據權利要求1所述的方法，其特征在于，確定視頻中的第一對象，包括：

確定所述視頻的第一幀圖像中的第一對象；

其中，所述第一幀圖像是根據所述視頻的附加顯示內容確定的，或者是用戶通過交互界面觸發對象選擇事件時指定的，或者是用戶在所述視頻播放畫面上操作時對應的幀圖像，或是用戶在輸入與所述第一對象關聯的顯示元素時指定的。

6.根據權利要求5所述的方法，其特征在于，獲取所述第一對象在所述視頻的播放畫面上的位置，包括：

檢測所述第一對象在所述第一幀圖像中的第一位置；

利用目標追蹤算法，追蹤所述第一對象在所述第一幀圖像的后續幀圖像中的第一位置；

未滿足追蹤停止條件的情況下，返回追蹤到的所述第一對象在第一幀圖像后續的至少一幀圖像中的第一位置；

滿足追蹤停止條件的情況下，停止對所述第一對象的追蹤。

7.根據權利要求6所述的方法，其特征在于，所述追蹤條件包括如下中的至少一項：

追蹤時長到達第三閾值；

幀圖像無所述第一對象；

第一對象在幀圖像的播放畫面上的面積占播放畫面的比例大于或等于第四閾值。

8.根據權利要求6所述的方法，其特征在于，所述第一對象在所述視頻的播放畫面上的第一位置包括：所述第一對象在第一幀圖像上的第一位置以及追蹤到的所述第一對象在第一幀圖像后續的至少一幀圖像中的第一位置；以及

根據所述第一位置，所述顯示元素跟隨所述第一對象顯示在所述視頻的播放畫面上，包括：

根據所述第一對象在所述第一幀圖像及所述第一幀圖像后續的至少一幀圖像中的一目標幀圖像的第一位置，確定所述第一對象在該目標幀圖像中的輪廓信息；

基于所述輪廓信息，確定第二位置；

在所述目標幀圖像播放畫面上的所述第二位置處，顯示所述顯示元素。

9.根據權利要求8所述的方法，其特征在于，所述第一對象在所述目標幀圖像中的第一位置包括二維框坐標信息；以及

根據所述第一對象在所述目標幀圖像中的第一位置，確定所述第一對象在所述目標幀圖像中的輪廓信息，包括：

從所述目標幀圖像中，將所述二維框坐標信息對應框區域內的所述第一對象分割出，得到所述第一對象的所述輪廓信息。