[發(fā)明專利]一種歌唱合成方法、裝置、電子設(shè)備及存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202011384883.2
• 申請日: 2020-11-30
• 公開（公告）號: CN112562633A
• 公開（公告）日: 2021-03-26
• 發(fā)明（設(shè)計）人: 顧宇
• 申請（專利權(quán)）人: 北京有竹居網(wǎng)絡(luò)技術(shù)有限公司
• 主分類號: G10L13/02
• 分類號: G10L13/02
• 代理公司: 北京遠(yuǎn)智匯知識產(chǎn)權(quán)代理有限公司 11659
• 代理人: 范坤坤

1.一種歌唱合成方法，其特征在于，包括：

獲取待合成的歌曲信息，其中，所述待合成的歌曲信息中包括歌詞文本和旋律信息；

根據(jù)所述待合成的歌曲信息獲得梅爾濾波器組特征和實際基頻信息；

根據(jù)所述梅爾濾波器組特征和所述實際基頻信息獲得聲音波形，并根據(jù)所述聲音波形獲得合成歌曲。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述待合成的歌曲信息獲得梅爾濾波器組特征和實際基頻信息，包括：

通過預(yù)先訓(xùn)練的聲學(xué)模型對所述待合成的歌曲信息進行預(yù)測獲得所述梅爾濾波器組特征和基頻差值信息；

獲取所述待合成的歌曲信息所對應(yīng)的預(yù)設(shè)基頻信息，將所述預(yù)設(shè)基頻信息和所述基頻差值信息相加獲得所述實際基頻信息。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述通過預(yù)先訓(xùn)練的聲學(xué)模型對所述待合成的歌曲信息進行預(yù)測獲得所述梅爾濾波器組特征和基頻差值信息之后，還包括：

根據(jù)用戶指令對所述基頻差值信息進行調(diào)整，獲得調(diào)整后的基頻差值信息；

所述將所述預(yù)設(shè)基頻信息和所述基頻差值信息相加獲得所述實際基頻信息，包括：

將所述預(yù)設(shè)基頻信息和所述調(diào)整后的基頻差值信息相加獲得所述實際基頻信息。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述梅爾濾波器組特征和所述實際基頻信息獲得聲音波形，包括：

通過預(yù)先訓(xùn)練的聲碼器模型對所述實際基頻信息和所述梅爾濾波器組特征進行預(yù)測獲得所述聲音波形。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述通過預(yù)先訓(xùn)練的聲碼器模型對所述實際基頻信息和所述梅爾濾波器組特征進行預(yù)測獲得所述聲音波形之前，還包括：

通過脈沖器對所述實際基頻信息進行周期性變換獲得周期性脈沖信息；

所述通過預(yù)先訓(xùn)練的聲碼器模型對所述實際基頻信息和所述梅爾濾波器組特征進行預(yù)測獲得所述聲音波形，包括：

通過預(yù)先訓(xùn)練的聲碼器模型對所述周期性脈沖信息和所述梅爾濾波器組特征進行預(yù)測獲得所述聲音波形。

6.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述通過預(yù)先訓(xùn)練的聲學(xué)模型對所述待合成的歌曲信息進行預(yù)測獲得所述梅爾濾波器組特征和基頻差值信息之前，還包括：

獲取第一樣本信息，其中，所述第一樣本信息中包含樣本歌曲信息，以及與樣本歌曲信息所對應(yīng)的梅爾濾波器組特征和基頻差值；

根據(jù)所述第一樣本信息對所述聲學(xué)模型進行訓(xùn)練，以確定所述聲學(xué)模型中歌曲信息與梅爾濾波器組特征和基頻差值的映射參數(shù)。

7.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述通過預(yù)先訓(xùn)練的聲碼器模型對所述實際基頻信息和所述梅爾濾波器組特征進行預(yù)測獲得所述聲音波形之前，還包括：

獲取第二樣本信息，其中，所述第二樣本信息中包含樣本聲音波形，以及與所述樣本聲音波形所對應(yīng)的梅爾濾波器組特征和周期性脈沖信息；

根據(jù)所述第二樣本信息對所述聲碼器模型進行訓(xùn)練，以確定所述聲碼器模型中聲音波形與梅爾濾波器組特征和周期性脈沖信息的映射參數(shù)。

8.一種歌唱合成裝置，其特征在于，包括：

待合成的歌曲信息獲取模塊，用于獲取待合成的歌曲信息，其中，所述待合成的歌曲信息中包括歌詞文本和旋律信息；

梅爾濾波器組特征和實際基頻信息獲取模塊，用于根據(jù)所述待合成的歌曲信息獲得梅爾濾波器組特征和實際基頻信息；

歌唱合成模塊，用于根據(jù)所述梅爾濾波器組特征和所述實際基頻信息獲得聲音波形，并根據(jù)所述聲音波形獲得合成歌曲。

9.一種電子設(shè)備，其特征在于，所述電子設(shè)備包括：

一個或多個處理器；

存儲裝置，用于存儲一個或多個程序，

當(dāng)所述一個或多個程序被所述一個或多個處理器執(zhí)行，使得所述一個或多個處理器實現(xiàn)如權(quán)利要求1-7任一所述的方法。

10.一種計算機可讀存儲介質(zhì)，其上存儲有計算機程序，其特征在于，該程序被處理器執(zhí)行時實現(xiàn)如權(quán)利要求1-7任一所述的方法。