[發明專利]音樂短片視頻生成方法、裝置、電子設備和存儲介質

在審

• 申請號: 202010611868.0
• 申請日: 2020-06-30
• 公開（公告）號: CN111935537A
• 公開（公告）日: 2020-11-13
• 發明（設計）人: 陳明
• 申請（專利權）人: 百度在線網絡技術（北京）有限公司
• 主分類號: H04N21/439
• 分類號: H04N21/439;H04N21/4402;H04N21/435;G06F40/30
• 代理公司: 北京清亦華知識產權代理事務所(普通合伙) 11201
• 代理人: 黃海艷

1.一種音樂短片視頻生成方法，包括：

獲取待處理的歌曲音頻；

獲取所述歌曲音頻對應的歌詞文本；

對所述歌詞文本中的歌詞進行語義分析，生成所述歌詞的內容關鍵詞；

根據所述歌詞的內容關鍵詞獲取與所述歌詞相關聯的視頻片段；

將所述歌曲音頻和與所述歌詞相關聯的視頻片段進行合成，生成對應的音樂短片視頻。

2.如權利要求1所述的音樂短片視頻生成方法，其中，所述根據所述歌詞的內容關鍵詞獲取與所述歌詞相關聯的視頻片段，包括：

獲取視頻，并按照場景分割所述視頻，以得到多個視頻片段；

獲取每個所述視頻片段的標簽信息；

計算所述歌詞的內容關鍵詞與每個所述視頻片段的標簽信息之間的相似度；

從每個所述視頻片段的標簽信息和所述歌詞的內容關鍵詞中，獲取相似度大于預設閾值的目標標簽信息和其對應的目標內容關鍵詞；

將所述目標標簽信息所對應的視頻片段，確定為所述目標內容關鍵詞所對應的歌詞相關聯的視頻片段。

3.如權利要求2所述的音樂短片視頻生成方法，其中，所述獲取每個所述視頻片段的標簽信息，包括：

針對每個所述視頻片段，對所述視頻片段進行分析，以獲得所述視頻片段之中每幀畫面所顯示的元素信息；

根據所述每幀畫面所顯示的元素信息，獲取所述視頻片段的標簽信息。

4.如權利要求1所述的音樂短片視頻生成方法，在獲取待處理的歌曲音頻之前，所述方法還包括：

獲取多個視頻片段素材；

獲取每個所述視頻片段素材的標簽信息；

根據所述多個視頻片段素材和每個所述視頻片段素材的標簽信息，建立視頻素材庫。

5.如權利要求4所述的音樂短片視頻生成方法，其中，所述根據所述歌詞的內容關鍵詞獲取與所述歌詞相關聯的視頻片段，包括：

從所述視頻素材庫中找出與所述內容關鍵詞匹配的標簽信息；

將找到的標簽信息所對應的視頻片段素材，確定為所述內容關鍵詞所對應的歌詞相關聯的視頻片段。

6.如權利要求1至5中任一項所述的音樂短片視頻生成方法，其中，所述將所述歌曲音頻和與所述歌詞相關聯的視頻片段進行合成，生成對應的音樂短片視頻，包括：

根據所述歌曲音頻獲取所述歌詞的播放時長；

根據所述播放時長，調整與所述歌詞相關聯的視頻片段的播放時長；

按照所述歌詞在所述歌曲音頻之中的順序，將與所述歌詞相關聯的視頻片段合成為一個視頻；

將合成得到的視頻與所述歌曲音頻進行合成，以生成對應的音樂短片視頻。

7.一種音樂短片視頻生成裝置，包括：

第一獲取模塊，用于獲取待處理的歌曲音頻；

歌詞文本獲取模塊，用于獲取所述歌曲音頻對應的歌詞文本；

第一生成模塊，用于對所述歌詞文本中的歌詞進行語義分析，生成所述歌詞的內容關鍵詞；

第二獲取模塊，用于根據所述歌詞的內容關鍵詞獲取與所述歌詞相關聯的視頻片段；

第二生成模塊，用于將所述歌曲音頻和與所述歌詞相關聯的視頻片段進行合成，生成對應的音樂短片視頻。

8.如權利要求7所述的音樂短片視頻生成裝置，其中，所述第二獲取模塊包括：

第一獲取單元，用于獲取視頻；

視頻分割單元，用于按照場景分割所述視頻，以得到多個視頻片段；

第二獲取單元，用于獲取每個所述視頻片段的標簽信息；

相似度計算單元，用于計算所述歌詞的內容關鍵詞與每個所述視頻片段的標簽信息之間的相似度；

第三獲取單元，用于從每個所述視頻片段的標簽信息和所述歌詞的內容關鍵詞中，獲取相似度大于預設閾值的目標標簽信息和其對應的目標內容關鍵詞；

確定單元，用于將所述目標標簽信息所對應的視頻片段，確定為所述目標內容關鍵詞所對應的歌詞相關聯的視頻片段。