[發(fā)明專利]一種視頻分段和標(biāo)記的方法及裝置

有效

• 申請?zhí)枺?/td>: 202010625141.8
• 申請日: 2020-07-01
• 公開（公告）號: CN111757170B
• 公開（公告）日: 2022-09-23
• 發(fā)明（設(shè)計）人: 李鎖花;殷飛;何健;遲民強
• 申請（專利權(quán)）人: 三星電子（中國）研發(fā)中心;三星電子株式會社
• 主分類號: H04N21/439
• 分類號: H04N21/439;H04N21/44;H04N21/4402;H04N21/4415;H04N21/442;H04N21/466;H04N21/472;H04N21/4728
• 代理公司: 北京德琦知識產(chǎn)權(quán)代理有限公司 11018
• 代理人: 王雙;王琦

1.一種視頻的分段和標(biāo)注方法，其特征在于，包括：

將視頻內(nèi)容按照場景進行分割，得到場景分割序列，為所述場景分割序列中的每個分段記錄對應(yīng)的場景信息，并將所述場景信息加入標(biāo)注信息；

將視頻內(nèi)容的音頻數(shù)據(jù)進行分割，分割點為聲音出現(xiàn)、切換和消失的點，得到聲音分割序列，對所述聲音分割序列中的每個分段進行聲音識別，并記錄相應(yīng)的聲音類別，作為各分段的聲音信息，將所述聲音信息加入標(biāo)注信息；和/或，將視頻內(nèi)容按照時間等分，計算每個時間段的熱度統(tǒng)計值，將熱度統(tǒng)計值的差小于第一設(shè)定閾值的相鄰時間段合并，并將對應(yīng)的熱度統(tǒng)計值合并，得到熱度分割序列，將熱度分割序列中每個分段的熱度統(tǒng)計值作為相應(yīng)分段的熱度信息，將所述熱度信息加入標(biāo)注信息；

將對所述視頻內(nèi)容進行分割得到的各個分割序列中的所有分割點作為所述視頻內(nèi)容的分割點，對所述視頻內(nèi)容再次進行視頻分割，得到視頻分割序列，并按照各個分割序列中的標(biāo)注信息，為所述視頻分割序列中的每個分段記錄對應(yīng)的標(biāo)注信息；

根據(jù)所述視頻分割序列和各個分段對應(yīng)的標(biāo)注信息，顯示視頻內(nèi)容的分段以及各分段的標(biāo)注信息；

其中，所述根據(jù)所述視頻分割序列和各個分段對應(yīng)的標(biāo)注信息，顯示視頻內(nèi)容的分段以及分段的標(biāo)注信息包括：

將所述視頻分割序列的所有分段的標(biāo)注信息分別與用于描述用戶觀看視頻的興趣特征的用戶畫像進行匹配，計算各個分段對用戶的推薦指數(shù)；其中，所述用戶畫像包括用戶的興趣點集合和非興趣點集合，興趣點集合和非興趣點集合中的各個元素對應(yīng)于標(biāo)注信息的各類標(biāo)簽；視頻分割序列中各分段的標(biāo)注信息與用戶畫像的匹配度越高，相應(yīng)分段對用戶的推薦指數(shù)越高；

在所述視頻分割序列的所有分段中，將用戶推薦指數(shù)差低于第二設(shè)定閾值的相鄰分段合并，并將對應(yīng)的標(biāo)注信息以及用戶推薦指數(shù)進行合并，得到用戶視頻分割序列，據(jù)此顯示視頻內(nèi)容的分段和各分段的標(biāo)注信息及用戶推薦指數(shù)；

所述計算各個分段對用戶的推薦指數(shù)包括：

對于任一分段i的場景信息中的每個元素s_ij，將元素s_ij分別與用戶興趣點集合中與場景相關(guān)的各個元素進行匹配分析，根據(jù)所有元素的匹配結(jié)果計算所述任一分段的場景興趣指數(shù)；對于任一分段的場景信息中的每個元素s_ij，將元素s_ij分別與用戶非興趣點集合中與場景相關(guān)的各個元素進行匹配分析，根據(jù)所有元素的匹配結(jié)果計算所述任一分段的場景非興趣指數(shù)；其中，i為所述視頻分割序列中各個分段的索引，j為元素索引；

當(dāng)所述標(biāo)注信息中包括聲音信息時：對于任一分類的聲音信息中的每個元素v_ij，將元素v_ij分別與用戶興趣點集合中與聲音相關(guān)的各個元素進行匹配分析，根據(jù)所有元素的匹配結(jié)果計算所述任一分段的聲音興趣指數(shù)；對于任一分類的聲音信息中的每個元素v_ij，將元素v_ij分別與用戶非興趣點集合中與聲音相關(guān)的各個元素進行匹配分析，根據(jù)所有元素的匹配結(jié)果計算所述任一分段的聲音非興趣指數(shù)；

當(dāng)所述標(biāo)注信息中包括熱度信息時：對于任一分段的熱度信息，將該熱度信息與用戶興趣點集合中與熱度相關(guān)的各個元素進行匹配分析，根據(jù)所有匹配結(jié)果計算所述任一分段的熱度興趣指數(shù)；對于任一分段的熱度信息，將該熱度信息與用戶非興趣點集合中與熱度相關(guān)的各個元素進行匹配分析，根據(jù)所有匹配結(jié)果計算所述任一分段的熱度非興趣指數(shù)；

對于每個分段，根據(jù)場景興趣指數(shù)和聲音興趣指數(shù)和/或熱度興趣指數(shù)計算用戶興趣指數(shù)，根據(jù)場景非興趣指數(shù)和聲音非興趣指數(shù)和/或熱度非興趣指數(shù)計算用戶非興趣指數(shù)，利用所述用戶興趣指數(shù)和所述用戶非興趣指數(shù)計算所述對用戶的推薦指數(shù)。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，根據(jù)所述每個時間段的播放數(shù)據(jù)統(tǒng)計值和/或即時評價統(tǒng)計值計算所述每個時間段的熱度統(tǒng)計值。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，對于所述每個時間段，確定每個用戶對于該時間段的視頻播放指數(shù)，將所有用戶對于該時間段的視頻播放指數(shù)求和，作為所述播放數(shù)據(jù)統(tǒng)計值；其中，所述視頻播放指數(shù)用于表示相應(yīng)時間段的視頻是否被正常播放和/或是否被播放完畢。