[發(fā)明專利]一種將語音轉(zhuǎn)換為旋律的方法和裝置

無效

• 申請?zhí)枺?/td>: 201110295667.5
• 申請日: 2011-09-30
• 公開（公告）號: CN103035235A
• 公開（公告）日: 2013-04-10
• 發(fā)明（設(shè)計）人: 楊晨;蔡蓮紅;周衛(wèi)
• 申請（專利權(quán)）人: 西門子公司
• 主分類號: G10L13/08
• 分類號: G10L13/08;G10H7/00
• 代理公司: 北京康信知識產(chǎn)權(quán)代理有限責(zé)任公司 11240
• 代理人: 李慧

1.一種將語音轉(zhuǎn)換為旋律的方法，所述方法包括：

獲取語音數(shù)據(jù)和樂譜信息，所述語音數(shù)據(jù)由用戶輸入，所述樂譜信息包括：歌詞信息，音符信息以及兩者的對應(yīng)關(guān)系；

調(diào)整所述語音數(shù)據(jù)中各音節(jié)的時長，使各音節(jié)的時長與樂譜信息中對應(yīng)的歌詞時長對齊；

按照所述樂譜信息中各音符的音調(diào)，調(diào)整所述語音數(shù)據(jù)的語音基頻點，使所述語音基頻點與樂譜信息中對應(yīng)音符的音調(diào)對齊；

結(jié)合調(diào)整音調(diào)后的語音基頻點和調(diào)整時長后的各音節(jié)形成旋律數(shù)據(jù)。

2.根據(jù)權(quán)利要求1所述的方法，其中，所述調(diào)整所述語音數(shù)據(jù)中各音節(jié)的時長，使各音節(jié)的時長與樂譜信息中對應(yīng)的歌詞時長對齊，包括：

提取所述語音數(shù)據(jù)中每一幀的能量和過零率信息；

根據(jù)每一幀的能量和過零率信息將所述語音數(shù)據(jù)劃分為語音段和靜音段；

按照所述樂譜信息中的歌詞信息將各語音段切分為音節(jié)；

調(diào)整語音數(shù)據(jù)中各音節(jié)的時長使得其與樂譜信息中對應(yīng)的歌詞時長對齊。

3.根據(jù)權(quán)利要求2所述的方法，其中，所述根據(jù)每一幀的能量和過零率信息將所述語音數(shù)據(jù)劃分為語音段和靜音段，包括：

根據(jù)每一幀的能量和過零率信息將每一幀標識為語音幀或靜音幀；

將相鄰的語音幀構(gòu)成語音段將相鄰的靜音幀構(gòu)成靜音段。

4.根據(jù)權(quán)利要求2所述的方法，其中，所述按照所述樂譜信息中的歌詞信息將各語音段切分為音節(jié)，包括：

確定樂譜信息的歌詞中每個句子對應(yīng)的語音段；

確定每個句子所包含的各個短語對應(yīng)的語音段；以及

對每個短語對應(yīng)的語音段進行語音切分，得到切分后的音節(jié)。

5.根據(jù)權(quán)利要求2所述的方法，其中，所述調(diào)整語音數(shù)據(jù)中各音節(jié)的時長使得其與樂譜信息中對應(yīng)的歌詞時長對齊包括：

在對一個包含聲母和韻母的音節(jié)進行時長調(diào)節(jié)時，如果需要對該音節(jié)的時長進行拉長，則保持聲母時長不變，只拉長韻母的時長；如果需要對該音節(jié)的時長進行縮短，則將聲母和韻母同時縮短。

6.根據(jù)權(quán)利要求2所述的方法，其中，所述調(diào)整語音數(shù)據(jù)中各音節(jié)的時長使得其與樂譜信息中對應(yīng)的歌詞時長對齊包括：

當一個音節(jié)的前后均為靜音段時，使該音節(jié)聲母的時長占整個音節(jié)時長的16.2％；

當該音節(jié)的前面為靜音段，后面不是靜音段時，使該音節(jié)聲母時長占整個音節(jié)時長的27.6％；

當該音節(jié)的前面不是靜音段，后面是靜音段時，使該音節(jié)聲母時長占整個音節(jié)時長的24.8％；以及

當該音節(jié)的前后均不是靜音段時，使該音節(jié)聲母時長占整個音節(jié)時長的32.9％。

7.根據(jù)權(quán)利要求1所述的方法，其中，所述按照樂譜信息中各音符的音調(diào)，調(diào)整所述語音數(shù)據(jù)的語音基頻點，使所述語音基頻點與樂譜信息中對應(yīng)音符的音調(diào)對齊，包括：

提取所述語音數(shù)據(jù)的語音基頻信息，所述語音音頻信息包括：語音數(shù)據(jù)的基頻均值以及語音數(shù)據(jù)的各個語音基頻點；

基于所述語音數(shù)據(jù)的基頻均值和樂譜信息中所有音符的基頻均值確定將所述語音數(shù)據(jù)轉(zhuǎn)換成的旋律的調(diào)號；

以確定的調(diào)號為基準，調(diào)整所述語音數(shù)據(jù)的各語音基頻點的頻率與樂譜信息中各音符的音調(diào)對齊。

8.根據(jù)權(quán)利要求7所述的方法，其中，所述基于所述語音數(shù)據(jù)的基頻均值和樂譜信息中所有音符的基頻均值確定將所述語音數(shù)據(jù)轉(zhuǎn)換成的旋律的調(diào)號，包括：

確定所述語音數(shù)據(jù)的基頻均值F0_aver和所述樂譜信息中所有音符的基頻均值P_aver；

如果F0_aver＞P_aver，將所述語音數(shù)據(jù)的基頻均值降K-n個半音作為將所述語音數(shù)據(jù)轉(zhuǎn)換成的旋律的調(diào)號，其中，K為F0_aver比P_aver高出的半音數(shù)目，n為實驗值，特別是可以取n為int(K/7)，int表示取整；

如果F0_aver＜P_aver，將所述語音數(shù)據(jù)的基頻均值升K-n個半音作為將所述語音數(shù)據(jù)轉(zhuǎn)換成的旋律的調(diào)號，其中，K為F0_aver比P_aver低的半音數(shù)目，n為實驗值，特別是可以取n為int(K/7)，int表示取整。