[發明專利]音樂伴奏的分離方法和裝置

在審

• 申請號: 202111262479.2
• 申請日: 2021-10-28
• 公開（公告）號: CN114005461A
• 公開（公告）日: 2022-02-01
• 發明（設計）人: 徐煥芬;周躍兵
• 申請（專利權）人: 廣州艾美網絡科技有限公司
• 主分類號: G10L21/028
• 分類號: G10L21/028;G10H1/36
• 代理公司: 廣州市律帆知識產權代理事務所(普通合伙) 44614
• 代理人: 余永文

本申請涉及一種音樂伴奏的分離方法、裝置、計算機設備以及計算機可讀存儲介質；所述方法包括：獲取導入音樂，并將導入音樂轉換為音樂頻譜；將音樂頻譜分別輸入人聲網絡、伴奏網絡和樂器網絡，獲得人聲頻譜、初始伴奏頻譜和各種樂器對應的樂器伴奏頻譜；根據人聲頻譜、初始伴奏頻譜和樂器伴奏頻譜分別獲取人聲文件、初始伴奏文件和各種樂器對應的樂器伴奏文件；根據樂器伴奏文件獲取各個樂器的樂器曲特征，并根據樂器曲特征對初始伴奏文件進行重塑得到高保真伴奏文件；該技術方案，先進行盲源分離得到初步伴奏分離工作，然后對每個樂器進行重塑從而得到高保真伴奏文件，有效提高了分離的伴奏質量，能夠對導入音樂實現高度保真的分離音樂伴奏。

技術領域

本申請涉及音樂處理技術領域，尤其是一種音樂伴奏的分離方法、裝置、計算機設備以及計算機可讀存儲介質。

背景技術

在演唱的過程中，往往需要對歌曲進行不斷的回放，創作，演繹，這就需要伴奏來配合，隨著人們的精神追求不斷的提升，越來越多的音樂愛好者開始不滿足于跟著歌手來演唱歌曲，而是希望像歌手一樣，聽著悅耳的伴奏，隨著伴奏一起演唱，仿佛自己在開個人演唱會的沉浸式體驗，這就需要有一份質量較好的伴奏曲，但是純樂器伴奏的成本較高，一份優質伴奏曲需要由多個樂器師共同演奏，價格昂貴，用戶個人很難獲取，而當前市面上大多采用軟件分離的方式，將一首完整的帶伴奏的歌曲分離成人聲和伴奏，但現有技術容易出現人聲和伴奏失真的情況，大大影響了創作者的創作熱情。

例如，目前有技術是采用伴奏人聲提取模型中的編碼模塊對混合音頻數據進行編碼處理，得到編碼后的音頻特征，分別通過伴奏人聲的解碼進行卷積處理得到目標人聲和伴奏；該技術中需要使用大量的歌曲數據進行訓練才能訓練出一個較好的編碼器，用于分離人聲和伴奏，否則將會大大降低人聲和伴奏的質量。

又如，有技術是對左右聲道信號相應頻點對的均值信號加權人聲增益，人聲增益與當前頻點對的歸一化互相關值成正比例取值，將加權人聲增益后的左聲道和右聲道的均值信號由頻域轉換為時域提取出人聲；該技術主要對立體聲進行人聲伴奏分離，但對于單聲道的歌曲則無法實現歌曲分離，使用范圍受限明顯。

再如，有技術采用通過提取音頻的聲紋信息，根據聲紋特征在預先建立的音樂數據庫中查找匹配的歌曲信息；提取對應歌曲信息的伴奏音樂；該技術采用聲紋識別，識別后查找庫存內所存在的伴奏，但是需要龐大的伴奏庫，且會存在沒有該歌曲伴奏的情況，難以滿足用戶需求。

綜上所述，現有技術過于依賴龐大的歌曲庫的情況下有效提高分離的伴奏質量，而且無法做到高度保真的分離音樂伴奏。

發明內容

針對于上述技術缺陷之一，本申請提供一種音樂伴奏的分離方法、裝置、計算機設備以及計算機可讀存儲介質，可以有效提高分離的伴奏質量，實現高度保真的分離音樂伴奏。

一種音樂伴奏的分離方法，包括：

獲取導入音樂，并將所述導入音樂轉換為音樂頻譜；

將所述音樂頻譜分別輸入所述人聲網絡、伴奏網絡和樂器網絡，獲得人聲頻譜、初始伴奏頻譜和各種樂器對應的樂器伴奏頻譜；

根據所述人聲頻譜、初始伴奏頻譜和樂器伴奏頻譜分別獲取人聲文件、初始伴奏文件和各種樂器對應的樂器伴奏文件；

根據所述樂器伴奏文件獲取各個樂器的樂器曲特征，并根據所述樂器曲特征對所述初始伴奏文件進行重塑得到高保真伴奏文件。

在一個實施例中，所述的音樂伴奏的分離方法，還包括：

基于盲源分離技術構建人聲網絡、伴奏網絡和樂器網絡；

利用歌曲庫中帶伴奏的樣本音樂輸入人聲網絡、伴奏網絡和樂器網絡，并利用歌曲庫中的純人聲、純伴奏和純樂器音色分別對人聲網絡、伴奏網絡和樂器網絡的輸出進行比對；

根據比對結果優化所述人聲網絡、伴奏網絡和樂器網絡。