[發明專利]用于創建伴隨視覺影像的音頻軌的方法

有效

• 申請號: 201880010311.2
• 申請日: 2018-02-05
• 公開（公告）號: CN110249387B
• 公開（公告）日: 2021-06-08
• 發明（設計）人: 馬克·D·伍德三世;彼得·D·伍德
• 申請（專利權）人: 柯達阿拉里斯股份有限公司
• 主分類號: G11B27/031
• 分類號: G11B27/031;G11B27/10;G11B27/28
• 代理公司: 成都超凡明遠知識產權代理有限公司 51258
• 代理人: 魏彥;洪玉姬

1.一種創建用以伴隨多媒體資產的序列的音頻軌的方法，包括：

使用處理器分析來自所述多媒體資產的提取的元數據和衍生的元數據；

使用所述處理器生成用于所述多媒體資產的故事板，其中，所述故事板使所述多媒體資產基于所述提取的元數據和所述衍生的元數據按序列進行布置；

使用所述處理器以基于對所述多媒體資產的序列的分析來確定音頻軌策略；以及

根據所述音頻軌策略來生成用以伴隨多媒體對象的選定子集的音頻軌。

2.根據權利要求1所述的方法，其中，所述故事板使所述多媒體資產基于時間事件聚簇按序列進行布置。

3.根據權利要求1所述的方法，其中，生成音頻軌的方法還包括識別在所述多媒體資產的序列內反復出現的主題模式。

4.根據權利要求3所述的方法，其中，識別反復出現的主題模式的方法包括下述中的至少一種：頻繁項目集挖掘、面部檢測、面部辨識、位置聚簇、對象檢測、場景分類、活動檢測、情感分析和事件分類。

5.根據權利要求1所述的方法，其中，生成音頻軌的方法還包括基于所述提取的元數據和衍生的元數據的變化的音樂結構，所述變化的音樂結構包括樂器、音調、基調、節奏、音量或者和弦結構中的至少一種。

6.根據權利要求5所述的方法，其中，所述衍生的元數據包括識別的有生命的和無生命的對象、場景或者活動。

7.根據權利要求6所述的方法，其中，識別有生命的對象包括識別描繪的對象的大小。

8.根據權利要求5所述的方法，其中，所述衍生的元數據包括確定的下述中的一種或多種：在所述多媒體對象序列中的圖像的視覺復雜性、景深、對比度、亮度和飽和度。

9.根據權利要求5所述的方法，其中，所述所提取的元數據包括特性，所述特性包括鏡頭焦距和物距中的一種或多種。

10.根據權利要求1所述的方法，其中，生成音頻軌的方法還包括情感分析。

11.根據權利要求10所述的方法，其中，所述情感分析包括檢測情感的變化。

12.根據權利要求11所述的方法，其中，所述情感分析包括使情感與來自圖像分析的語義概念相關聯。

13.根據權利要求11所述的方法，其中，所述情感分析包括使情感與面部表情相關聯。

14.根據權利要求6所述的方法，其中，識別所述有生命的和無生命的對象包括識別以對應的反復出現的音樂元素反映的反復出現的對象、場景或者活動。

15.根據權利要求5所述的方法，其中，生成音頻軌的方法對多媒體資產中描繪的人、捕獲所述多媒體資產的位置、或者捕獲所述多媒體資產的時間是響應性的。

16.根據權利要求5所述的方法，其中，生成音頻軌的方法對聆聽所述音頻軌的人是響應性的。

17.根據權利要求1所述的方法，其中，生成音頻軌的方法包括使預錄制歌曲與檢測的位置、時間、活動或者人相關聯。