[發明專利]一種視頻播放的跳轉導航方法和設備

有效

• 申請號: 201811466336.1
• 申請日: 2018-12-03
• 公開（公告）號: CN109743617B
• 公開（公告）日: 2020-11-24
• 發明（設計）人: 張菡;孫茂松;唐杰
• 申請（專利權）人: 清華大學
• 主分類號: H04N21/435
• 分類號: H04N21/435;H04N21/466;H04N21/462;H04N21/845
• 代理公司: 北京路浩知識產權代理有限公司 11002
• 代理人: 王瑩;吳歡燕

1.一種視頻播放的跳轉導航方法，其特征在于，包括：

根據視頻文本將視頻劃分為多個視頻子段；

確定當前播放時間點所屬的視頻子段，提取當前播放時間點所屬的視頻子段的視頻文本特征向量，提取當前播放時間點所屬的視頻子段的視頻圖像特征向量；

將當前用戶信息、當前播放時間點所屬的視頻子段的視頻文本特征向量和視頻圖像特征向量輸入到已訓練的神經網絡，輸出每一視頻子段作為跳轉目標視頻子段的概率值，以供當前用戶根據每一概率值選擇對應的視頻子段進行跳轉；

其中，所述根據視頻文本將視頻劃分為多個視頻子段，包括：

根據所述視頻文本提取每一視頻字幕的起始時刻和終止時刻；

確定任意相鄰的兩個視頻字幕中前一視頻字幕的終止時刻和后一視頻字幕的起始時刻之間的間隔時段；

將所有間隔時段中間隔時段的時長大于目標時間閾值的間隔時段作為目標間隔時段；

在每一目標間隔時段中添加一個劃分點，根據每一劃分點將所述視頻劃分為多個視頻子段；

所述將所有間隔時段中間隔時段的時長大于目標時間閾值的間隔時段作為目標間隔時段之前，還包括：

根據用戶行為日志獲取所述視頻中的有效跳轉事件，每一有效跳轉事件包括一個有效跳轉起點和一個有效跳轉終點；

根據時間閾值在所有間隔時段中確定預劃分間隔時段，每一預劃分間隔時段的時長大于所述時間閾值；

在每一預劃分間隔時段中添加一個預劃分點，根據每一預劃分點將所述視頻預劃分為多個視頻子段；

確定所有預劃分的視頻子段中的非空視頻子段和有效跳轉數量，所述非空視頻子段中包括至少一個有效跳轉起點和/或至少一個有效跳轉終點，所述有效跳轉數量為所述視頻中的有效跳轉事件的數量；

確定第一比例和第二比例，所述第一比例為所述非空視頻子段的數量與所有預劃分的視頻子段的總數量的比值，所述第二比例為所述有效跳轉數量與視頻中所有跳轉事件的總數量的比值；

獲取所述第一比例與所述第二比例的乘積值以及所述第一比例與所述第一比例的和值，將所述乘積值與所述和值的比值取最大值時對應的時間閾值作為所述目標時間閾值。

2.根據權利要求1所述的方法，其特征在于，所述根據用戶行為日志獲取所述視頻中的有效跳轉事件，包括：

根據所述用戶行為日志提取所述視頻中的跳轉事件，每一跳轉事件包括一個跳轉起點和一個跳轉終點；

將所有跳轉事件按時間先后進行排序，獲得跳轉事件序列；

對所述跳轉事件序列中的跳轉事件進行合并，獲得有效跳轉事件序列，其中所述有效跳轉事件序列中任意相鄰的兩個跳轉事件的前一跳轉事件的跳轉終端與后一跳轉事件的跳轉起點的時間間隔大于預設時長，將所述有效跳轉事件序列中每一跳轉事件作為所述視頻中的一個有效跳轉事件。

3.根據權利要求2所述的方法，其特征在于，所述對所述跳轉事件序列中的跳轉事件進行合并，包括：

對于所述跳轉事件序列中任意相鄰的兩個跳轉事件，若確定所述任意相鄰的兩個跳轉事件中前一跳轉事件的跳轉終端與后一跳轉事件的跳轉起點的時間間隔不超過所述預設時長，則將所述任意相鄰的兩個跳轉事件合并成一個新的跳轉事件，所述新的跳轉事件的跳轉起點為所述任意相鄰的兩個跳轉事件中前一跳轉事件的跳轉起點，所述新的跳轉事件的跳轉終點為所述任意相鄰的兩個跳轉事件中后一跳轉事件的跳轉終點。

4.根據權利要求1所述的方法，其特征在于，所述提取當前播放時間點所屬的視頻子段的視頻文本特征向量，包括：

提取當前播放時間點所屬的視頻子段對應的視頻文本中每一詞的詞向量；

對當前播放時間點所屬的視頻子段對應的視頻文本中每一詞的詞向量加權求和，以獲取當前播放時間點所屬的視頻子段的視頻文本特征向量。

5.根據權利要求1所述的方法，其特征在于，所述提取當前播放時間點所屬的視頻子段的視頻圖像特征向量，包括：

提取當前播放時間點所屬的視頻子段的每一幀圖像的圖像特征向量；

對當前播放時間點所屬的視頻子段的每一幀圖像的圖像特征向量加權求和，以獲取當前播放時間點所屬的視頻子段的視頻圖像特征向量。