[發明專利]一種歌曲處理方法、裝置、電子設備及可讀存儲介質

在審

• 申請號: 202011546089.3
• 申請日: 2020-12-23
• 公開（公告）號: CN112669811A
• 公開（公告）日: 2021-04-16
• 發明（設計）人: 洪宇
• 申請（專利權）人: 騰訊音樂娛樂科技（深圳）有限公司
• 主分類號: G10L13/033
• 分類號: G10L13/033;G10L13/02;G10L21/0272;G10L15/14
• 代理公司: 深圳市深佳知識產權代理事務所(普通合伙) 44285
• 代理人: 陳彥如

本申請公開了一種歌曲處理方法、裝置、設備及計算機可讀存儲介質，該方法包括：獲取待處理歌曲，并對待處理歌曲進行聲伴分離處理，得到人聲音頻；對人聲音頻進行音高檢測，得到主旋律信息；對待處理歌曲進行節奏檢測，得到節奏信息；獲取配器參數，并基于主旋律信息和節奏信息，利用配器參數進行和聲生成，得到和聲音頻；對人聲音頻和和聲音頻進行歌曲合成處理，得到處理后歌曲；該方法通過聲伴分離處理的方式將人聲剝離，避免在轉換后造成歌曲中的人聲消失，并重新生成和聲音頻，增大了風格轉換的幅度，保證了歌曲風格的轉換效果。

技術領域

本申請涉及音頻處理技術領域，特別涉及一種歌曲處理方法、歌曲處理裝置、電子設備及計算機可讀存儲介質。

背景技術

歌曲風格轉換是指將一首普通的歌曲，轉化成適合睡眠時聽的舒緩版本，或者是適合跑步時聽的高動態版本的歌曲處理方式。相關技術在進行歌曲風格轉換時，通常利用編碼器對歌曲進行過高維表示，并將高位特征拆分為歌曲風格部分和旋律部分，通過對歌曲風格部分進行替換，并在替換后重新編碼，完成對歌曲風格的轉換。然而在轉換過程中，歌曲中內的人聲通常會被認為是一種音色，屬于歌曲風格的一部分，因此在轉換后人聲會消失，而對于歌曲來說，人的演唱是非常重要的一環。同時，相關技術僅能對原有歌曲進行處理，歌曲風格轉換的幅度較小，因此相關技術的歌曲風格轉換效果差。

發明內容

有鑒于此，本申請的目的在于提供一種歌曲處理方法、歌曲處理裝置、電子設備及計算機可讀存儲介質，通過聲伴分離處理將聲伴分離，使得處理后歌曲人聲不會消失，同時根據主旋律信息、伴奏信息和配器參數重新生成和聲，增大了歌曲風格轉換的幅度，改善了歌曲風格轉換效果。

為解決上述技術問題，第一方面，本申請提供了一種歌曲處理方法，包括：

獲取待處理歌曲，并對所述待處理歌曲進行聲伴分離處理，得到人聲音頻；

對所述人聲音頻進行音高檢測，得到主旋律信息；

對所述待處理歌曲進行節奏檢測待處理歌曲，得到節奏信息；

獲取配器參數，并基于所述主旋律信息和所述節奏信息，利用所述配器參數進行和聲生成，得到和聲音頻；

對所述人聲音頻和所述和聲音頻進行歌曲合成處理，得到處理后歌曲。

在一種實施方式中，所述基于所述主旋律信息和所述節奏信息，利用所述配器參數進行和聲生成，得到和聲音頻，包括：

將所述主旋律信息和所述節奏信息輸入曲譜生成模型，得到和聲曲譜；

將所述和聲曲譜和所述配器參數輸入音頻合成器，生成所述和聲音頻。

在一種實施方式中，所述曲譜生成模型的生成過程，包括：

獲取訓練旋律信息和對應的訓練曲譜信息；

確定所述訓練旋律信息和所述訓練曲譜信息之間的標簽關系；所述標簽關系為所述訓練旋律信息為所述訓練曲譜信息的標簽，或所述標簽關系為所述訓練旋律信息是所述訓練曲譜信息的標簽；

基于所述標簽關系，利用所述訓練旋律信息和所述訓練曲譜信息對初始模型進行訓練，得到所述曲譜生成模型。

在一種實施方式中，所述獲取配器參數之前，還包括：

獲取訓練歌曲和對應的訓練風格信息；

將所述訓練歌曲輸入樂器識別模型，得到對應的訓練配器參數；

利用所述訓練配器參數和所述訓練風格信息建立所述風格與配器對應關系；

相應的，所述獲取配器參數，包括：

獲取目標歌曲對應的目標風格信息，并利用所述目標風格信息篩選風格與配器對應關系，得到所述配器參數。