[發明專利]多媒體內容的標簽制作方法及裝置

在審

• 申請號: 201610685151.4
• 申請日: 2016-08-18
• 公開（公告）號: CN107770614A
• 公開（公告）日: 2018-03-06
• 發明（設計）人: 蘇軍根;盧燕青;林健;洪博宇;黃海;魯維;甘玉玨
• 申請（專利權）人: 中國電信股份有限公司
• 主分類號: H04N21/439
• 分類號: H04N21/439;H04N21/44;H04N21/8352;H04N21/845;H04N21/8547
• 代理公司: 中國國際貿易促進委員會專利商標事務所11038
• 代理人: 許蓓

1.一種多媒體內容的標簽制作方法，包括：

提取多媒體內容中的目標特征；

對提取的多媒體內容的目標特征與目標特征庫中的目標特征進行匹配；

根據匹配的目標特征所對應的目標與所述目標位于多媒體內容中的時間信息制作標簽。

2.如權利要求1所述的方法，其特征在于，所述提取多媒體內容中的目標特征包括:

確定視頻畫面中目標的位置和尺寸，并提取視頻畫面中的目標圖像；

將所述目標圖像轉化為灰度圖；

將灰度圖的灰度變化、輪廓變化特征提取為目標特征。

3.如權利要求1所述的方法，其特征在于，所述提取多媒體內容中的目標特征還包括:

提取音頻片段；

生成音頻片段的波形圖；

在所述波形圖中提取各個時間點上具有最大音頻振幅的音頻頻率，并將提取的音頻頻率及其時間點作為音頻特征。

4.如權利要求1所述的方法，其特征在于，所述目標特征庫采用以下方法創建：

從多媒體內容的已標注的標簽中提取目標特征；

基于提取的目標特征對多媒體內容進行機器學習，形成目標特征與目標的對應關系。

5.如權利要求1所述的方法，其特征在于，所述目標特征庫采用以下方法創建：

提取目標圖片中的目標特征；

基于提取的目標特征對多媒體內容進行機器學習，形成目標特征與目標的對應關系。

6.如權利要求1所述的方法，其特征在于，所述目標特征包括人臉特征以及聲紋特征，或者，所述多媒體內容包括交互式網絡電視IPTV點播節目以及IPTV直播節目。

7.一種基于權利要求1～6任一項所述標簽制作方法的內容推薦方法，包括：

根據目標與推薦事件的關聯關系，獲取所述目標相關聯的推薦事件；

在所述目標位于多媒體內容的時間上觸發所述標簽，呈現相關聯的推薦事件。

8.如權利要求7所述的方法，其特征在于，所述推薦事件包括：

推送電視購物鏈接、對IPTV節目互動進行投票、推送人物介紹或與人物相關的視頻播放鏈接。

9.如權利要求7所述的方法，其特征在于，其中，在目標與推薦事件的關聯關系中，目標與不同的推薦事件相關聯。

10.一種多媒體內容的標簽制作裝置，包括：

特征提取模塊，用于提取多媒體內容中的目標特征；

特征匹配模塊，用于對提取的多媒體內容的目標特征與目標特征庫中的目標特征進行匹配；

標簽制作模塊，用于根據匹配的目標特征所對應的目標與所述目標位于多媒體內容中的時間信息制作標簽。

11.如權利要求10所述的裝置，其特征在于，所述特征提取模塊包括:

圖像提取單元，用于確定視頻畫面中目標的位置和尺寸，并提取視頻畫面中的目標圖像；

圖像轉化單元，用于將所述目標圖像轉化為灰度圖；

特征提取單元，用于將灰度圖的灰度變化、輪廓變化特征提取為目標特征。

12.如權利要求10所述的裝置，其特征在于，所述特征提取模塊還包括:

音頻提取單元，用于提取音頻片段；

波形圖生成單元，用于生成音頻片段的波形圖；

頻率提取單元，用于在所述波形圖中提取各個時間點上具有最大音頻振幅的音頻頻率，并將提取的音頻頻率及其時間點作為音頻特征。

13.一種基于權利要求10～12任一項所述標簽制作裝置的內容推薦裝置，包括：

如權利要求10～12任一項所述的標簽制作裝置；

推薦事件獲取模塊，用于根據目標與推薦事件的關聯關系，獲取所述目標相關聯的推薦事件；

推薦事件呈現模塊，用于在所述目標位于多媒體內容的時間上觸發所述標簽，呈現相關聯的推薦事件。

14.如權利要求13所述的裝置，其特征在于，所述推薦事件包括：

推送電視購物鏈接、對IPTV節目互動進行投票、推送人物介紹或與人物相關的視頻播放鏈接。

15.如權利要求13所述的裝置，其特征在于，在所述目標與推薦事件的關聯關系中，目標與不同的推薦事件相關聯。