[發明專利]標注包括一組幀的視頻流的方法和裝置

有效

• 申請號: 201780052341.5
• 申請日: 2017-08-21
• 公開（公告）號: CN109644255B
• 公開（公告）日: 2020-10-16
• 發明（設計）人: 張瑞
• 申請（專利權）人: 華為技術有限公司
• 主分類號: H04N7/18
• 分類號: H04N7/18
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種標注包括一組幀的視頻流的方法，其特征在于，所述方法包括：

掃描所述一組幀中的第一幀以搜索人物，獲得所述第一幀中的感興趣區域的表示，其中，所述感興趣區域中包括可能包含所述人物的圖像；

形成包含所述第一幀中的感興趣區域的表示的視頻軌道；

掃描所述一組幀中的后續幀以搜索所述人物，其中對所述后續幀的掃描從所述后續幀的前一幀中所述感興趣區域的位置在所述后續幀的位置處開始，獲得所述后續幀中的感興趣區域的表示；

向所述視頻軌道添加所述后續幀中的感興趣區域的表示；

當所述視頻軌道中的至少一個感興趣區域的表示指示特定人物且不指示其他人物時，為所述視頻軌道設置正標簽，其中，所述正標簽表示所述視頻軌道指示包含所述特定人物的圖像；

提供所述設置有正標簽的視頻軌道用于訓練相似性模型，以使訓練后的所述相似性模型用于識別所述特定人物。

2.根據權利要求1所述的方法，其特征在于，所述第一幀中的所述感興趣區域的所述表示包括指示所述感興趣區域的位置和尺寸的一組坐標。

3.根據權利要求1或2所述的方法，其特征在于，所述第一幀中的所述感興趣區域的所述表示包括從所述第一幀中的所述感興趣區域中提取的圖像數據。

4.根據權利要求1或2所述的方法，其特征在于，還包括：

在顯示設備上顯示所述視頻軌道。

5.根據權利要求1或2所述的方法，其特征在于，所述設置有正標簽的視頻軌道中指示所述特定人物的感興趣區域的表示的數量小于所述設置有所述正標簽的視頻軌道中的感興趣區域的表示的總數量。

6.根據權利要求1或2所述的方法，其特征在于，所述視頻流包含不止一個人物的圖像，并且所述視頻軌道包括多個視頻軌道，其中所述多個視頻軌道中的每一個對應于相應所述不止一個人物中的每一個。

7.根據權利要求1或2所述的方法，其特征在于，所述第一幀和所述后續幀是所述視頻流中的連續幀。

8.根據權利要求1或2所述的方法，其特征在于，所述掃描所述第一幀包括分析像素數據。

9.根據權利要求8所述的方法，其特征在于，所述分析包括基于所述像素數據計算元數據。

10.根據權利要求1、2、9中任一項所述的方法，其特征在于，所述掃描所述第一幀包括：

分析滑動窗口內包含的所述第一幀的一部分；以及

確定所述一部分包含所述人物的概率。

11.一種標注包括一組幀的視頻流的系統，其特征在于，所述系統包括：

處理器；

存儲器，存儲有由所述處理器執行的計算機可讀指令，所述指令包括：

視頻分析模塊，用于產生視頻軌道，所述視頻分析模塊包括：

人體檢測模塊，用于掃描所述一組幀中的圖像數據以搜索人物，獲得所述一組幀中的感興趣區域的表示，其中，所述感興趣區域中包括可能包含所述人物的圖像；

視覺特征提取模塊，用于向所述視頻軌道添加所述一組幀中的感興趣區域的表示；

人體跟蹤模塊，用于基于前一幀中的感興趣區域的位置來確定在所述一組幀中的各個幀的所述掃描的起始位置；

標記模塊，用于當所述視頻軌道中的至少一個所述感興趣區域的表示指示特定人物且不指示其他人物時，為所述視頻軌道設置正標簽，其中，所述正標簽表示所述視頻軌道指示包含所述特定人物的圖像；以及

存儲設備，用于存儲所述設置有正標簽的視頻軌道；

所述存儲設備，還用于提供所述設置有正標簽的視頻軌道用于訓練相似性模型，以使訓練后的所述相似性模型用于識別所述特定人物。

12.根據權利要求11所述的系統，其特征在于，所述感興趣區域的所述表示包括指示所述感興趣區域的位置和尺寸的一組坐標。