[發明專利]視頻配樂方法、信息處理方法、設備及存儲介質

在審

• 申請號: 202111593541.6
• 申請日: 2021-12-23
• 公開（公告）號: CN114282051A
• 公開（公告）日: 2022-04-05
• 發明（設計）人: 陳思宇;康力;鄧俊祺;王立波;陳穎
• 申請（專利權）人: 阿里巴巴（中國）有限公司
• 主分類號: G06F16/735
• 分類號: G06F16/735;G06F16/75;G06F16/783;G06F16/787;G06N3/04;G06N3/08
• 代理公司: 北京同鈞律師事務所 16037
• 代理人: 許懷遠

本申請提供一種視頻配樂方法、信息處理方法、設備及存儲介質，其中方法包括：確定待處理的視頻的簽名向量；根據所述簽名向量確定所述視頻的類別；基于與所述類別相匹配的音頻為所述視頻配樂；其中，所述視頻的簽名向量用于表征所述視頻在視頻和音頻的跨模態空間中的位置。本申請可以基于簽名向量更加快速、準確地實現視頻的分類，提高視頻配樂的效率和準確性，提升用戶體驗。

技術領域

本申請涉及視頻處理技術領域，尤其涉及一種視頻配樂方法、信息處理方法、設備及存儲介質。

背景技術

視頻類信息包含豐富的內容，在各個領域得到了廣泛的應用。其中，視頻的配樂具有重要的作用，合適的配樂能迅速提升視頻的正向情緒，提高視頻的價值。

目前，視頻配樂大多由用戶從熱門歌曲中選擇，配樂的效率和準確性有待提高。

發明內容

本申請實施例的主要目的在于提供一種視頻配樂方法、信息處理方法、設備及存儲介質，以提升視頻配樂的效率和準確性。

第一方面，本申請實施例提供一種視頻配樂方法，包括：

確定待處理的視頻的簽名向量；

根據所述簽名向量確定所述視頻的類別；

基于與所述類別相匹配的音頻為所述視頻配樂；

其中，所述視頻的簽名向量用于表征所述視頻在視頻和音頻的跨模態空間中的位置。

第二方面，本申請實施例提供一種視頻配樂方法，包括：

對待處理的視頻的特征進行正則化操作，根據正則化操作后的特征確定所述視頻的簽名向量和/或類別；

從備選音頻中選擇與所述簽名向量和/或類別相匹配的音頻為所述視頻配樂；

其中，正則化操作用于調整所述視頻的特征分布；所述視頻的簽名向量用于表征所述視頻在視頻和音頻的跨模態空間中的位置。

第三方面，本申請實施例提供一種視頻配樂方法，包括：

獲取為目標商品拍攝的視頻，確定所述視頻的簽名向量；

根據所述簽名向量確定所述視頻的類別；

基于與所述類別相匹配的音頻為所述視頻配樂，配樂后的視頻用于與所述目標商品的信息進行關聯展示；

其中，所述視頻的簽名向量用于表征所述視頻在視頻和音樂的跨模態空間中的位置。

第四方面，本申請實施例提供一種信息處理方法，包括：

確定待處理的第一信息的簽名向量；

根據所述簽名向量確定所述第一信息的類別；

從多個第二信息中確定與所述類別相匹配的第二信息，對所述第一信息和第二信息進行融合；

其中，所述第一信息的簽名向量用于表征所述第一信息在跨模態空間中的位置；所述第一信息和第二信息為視頻、圖像、音頻、文本、傳感數據、場景特征中的任意兩種模態的信息。

第五方面，本申請實施例提供一種電子設備，包括：

至少一個處理器；以及

與所述至少一個處理器通信連接的存儲器；

其中，所述存儲器存儲有可被所述至少一個處理器執行的指令，所述指令被所述至少一個處理器執行，以使所述電子設備執行上述任一方面所述的方法。

第六方面，本申請實施例提供一種計算機可讀存儲介質，所述計算機可讀存儲介質中存儲有計算機執行指令，當處理器執行所述計算機執行指令時，實現上述任一方面所述的方法。