[發(fā)明專(zhuān)利]語(yǔ)音質(zhì)量評(píng)價(jià)設(shè)備、方法和系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201410736291.0
• 申請(qǐng)日: 2014-12-04
• 公開(kāi)（公告）號(hào): CN104361896B
• 公開(kāi)（公告）日: 2018-04-13
• 發(fā)明（設(shè)計(jì)）人: 林暉
• 申請(qǐng)（專(zhuān)利權(quán)）人: 上海流利說(shuō)信息技術(shù)有限公司
• 主分類(lèi)號(hào): G10L25/60
• 分類(lèi)號(hào): G10L25/60
• 代理公司: 北京思睿峰知識(shí)產(chǎn)權(quán)代理有限公司11396
• 代理人: 謝建云,董寧

技術(shù)領(lǐng)域

本發(fā)明涉及語(yǔ)音技術(shù)領(lǐng)域，尤其涉及一種基于韻律的語(yǔ)音質(zhì)量評(píng)價(jià)設(shè)備、方法和系統(tǒng)，數(shù)據(jù)處理設(shè)備和方法，語(yǔ)音處理設(shè)備和方法，以及移動(dòng)終端。

背景技術(shù)

隨著互聯(lián)網(wǎng)的發(fā)展，基于互聯(lián)網(wǎng)的語(yǔ)言學(xué)習(xí)應(yīng)用也得到了快速的發(fā)展。在一些語(yǔ)言學(xué)習(xí)應(yīng)用中，應(yīng)用提供商通過(guò)互聯(lián)網(wǎng)將學(xué)習(xí)材料發(fā)送到客戶(hù)端，用戶(hù)經(jīng)由客戶(hù)端獲取學(xué)習(xí)材料，并根據(jù)學(xué)習(xí)材料的指示而在客戶(hù)端上進(jìn)行操作，例如輸入文字、輸入語(yǔ)音或者進(jìn)行選擇等，并獲得反饋，從而提高自己的語(yǔ)言能力。

對(duì)于語(yǔ)言學(xué)習(xí)，除了學(xué)習(xí)語(yǔ)法和詞匯等之外，一個(gè)重要的方面是學(xué)習(xí)語(yǔ)言的聽(tīng)說(shuō)能力，尤其是說(shuō)的能力。對(duì)于每種語(yǔ)言來(lái)說(shuō)，會(huì)根據(jù)不同的場(chǎng)景而在說(shuō)話(huà)時(shí)具有不同的說(shuō)話(huà)韻律。這里，韻律是指對(duì)發(fā)音抑揚(yáng)頓挫的表示，既可以針對(duì)整句話(huà)確定句子的韻律(下文中稱(chēng)為說(shuō)話(huà)韻律)，也可以針對(duì)每個(gè)詞確定詞的韻律(下文中稱(chēng)為發(fā)音韻律)。因此，用戶(hù)在學(xué)習(xí)用該語(yǔ)言說(shuō)話(huà)時(shí)，還需要學(xué)習(xí)這種說(shuō)話(huà)韻律和/或發(fā)音韻律。

在現(xiàn)有的語(yǔ)音技術(shù)中，用戶(hù)通過(guò)客戶(hù)端的錄音設(shè)備錄制語(yǔ)音，系統(tǒng)根據(jù)與該語(yǔ)音相對(duì)應(yīng)的文本，對(duì)用戶(hù)錄制的語(yǔ)音進(jìn)行拆分，并逐個(gè)單詞地就用戶(hù)的語(yǔ)音和現(xiàn)有聲學(xué)模型進(jìn)行比較，從而向用戶(hù)提供該單詞讀音是否正確的反饋。然而，現(xiàn)有的語(yǔ)音技術(shù)在評(píng)價(jià)用戶(hù)的發(fā)音情況時(shí)并未考慮有關(guān)語(yǔ)音韻律方面的任何信息，因此也不能夠讓學(xué)習(xí)者學(xué)習(xí)說(shuō)話(huà)和/或發(fā)音的韻律。

發(fā)明內(nèi)容

在下文中給出了關(guān)于本發(fā)明的簡(jiǎn)要概述，以便提供關(guān)于本發(fā)明的某些方面的基本理解。應(yīng)當(dāng)理解，這個(gè)概述并不是關(guān)于本發(fā)明的窮舉性概述。它并不是意圖確定本發(fā)明的關(guān)鍵或重要部分，也不是意圖限定本發(fā)明的范圍。其目的僅僅是以簡(jiǎn)化的形式給出某些概念，以此作為稍后論述的更詳細(xì)描述的前序。

鑒于此，本發(fā)明提供了一種基于韻律的語(yǔ)音質(zhì)量評(píng)價(jià)設(shè)備、方法和系統(tǒng)，數(shù)據(jù)處理設(shè)備和方法，語(yǔ)音處理設(shè)備和方法，以及移動(dòng)終端，以至少解決現(xiàn)有的語(yǔ)音技術(shù)在評(píng)價(jià)用戶(hù)的發(fā)音情況時(shí)未考慮有關(guān)語(yǔ)音韻律的信息的問(wèn)題。

根據(jù)本發(fā)明的一個(gè)方面，提供了一種基于韻律的語(yǔ)音質(zhì)量評(píng)價(jià)設(shè)備，該設(shè)備包括：存儲(chǔ)單元，適于存儲(chǔ)預(yù)定文本和預(yù)定文本對(duì)應(yīng)的參考韻律特征，該預(yù)定文本包括一個(gè)或者多個(gè)語(yǔ)句，且每個(gè)語(yǔ)句包括一個(gè)或者多個(gè)詞；用戶(hù)語(yǔ)音接收單元，適于接收用戶(hù)針對(duì)預(yù)定文本所錄入的用戶(hù)語(yǔ)音；特征獲取單元，適于獲取用戶(hù)語(yǔ)音的用戶(hù)韻律特征；以及語(yǔ)音質(zhì)量計(jì)算單元，適于基于參考韻律特征與用戶(hù)韻律特征之間的相關(guān)性，計(jì)算用戶(hù)語(yǔ)音的語(yǔ)音質(zhì)量。

根據(jù)本發(fā)明的另一個(gè)方面，還提供了一種數(shù)據(jù)處理設(shè)備，該設(shè)備適于在服務(wù)器中執(zhí)行，并包括：服務(wù)器存儲(chǔ)單元，適于存儲(chǔ)預(yù)定文本以及與預(yù)定文本對(duì)應(yīng)的參考語(yǔ)音；以及韻律計(jì)算單元，適于計(jì)算參考語(yǔ)音中與預(yù)定文本的每個(gè)語(yǔ)句對(duì)應(yīng)的語(yǔ)音段的基頻曲線(xiàn)的各個(gè)分段多項(xiàng)式，并將所獲得的各個(gè)分段多項(xiàng)式與預(yù)定文本中的每個(gè)語(yǔ)句相關(guān)聯(lián)地保存在服務(wù)器存儲(chǔ)單元中，或根據(jù)所獲得的各個(gè)分段多項(xiàng)式計(jì)算參考語(yǔ)音的參考韻律特征并將該參考韻律特征保存在服務(wù)器存儲(chǔ)單元中。

根據(jù)本發(fā)明的另一個(gè)方面，還提供了一種語(yǔ)音處理設(shè)備，該設(shè)備適于在計(jì)算機(jī)中執(zhí)行，并包括：參考語(yǔ)音接收單元，適于接收特定用戶(hù)針對(duì)預(yù)定文本所錄入的語(yǔ)音作為參考語(yǔ)音，并將參考語(yǔ)音發(fā)送給預(yù)定服務(wù)器；以及韻律計(jì)算單元，適于計(jì)算參考語(yǔ)音中與預(yù)定文本的每個(gè)語(yǔ)句對(duì)應(yīng)的語(yǔ)音段的基頻曲線(xiàn)的各個(gè)分段多項(xiàng)式，以將獲得的各個(gè)分段多項(xiàng)式與預(yù)定文本相關(guān)聯(lián)地發(fā)送至預(yù)定服務(wù)器，或根據(jù)獲得的各個(gè)分段多項(xiàng)式獲得參考語(yǔ)音的參考韻律特征，以將參考韻律特征與預(yù)定文本相關(guān)聯(lián)地發(fā)送至預(yù)定服務(wù)器。

根據(jù)本發(fā)明的另一個(gè)方面，還提供了一種基于韻律的語(yǔ)音質(zhì)量評(píng)價(jià)方法，該方法包括如下步驟：接收用戶(hù)針對(duì)預(yù)定文本所錄入的用戶(hù)語(yǔ)音，該預(yù)定文本包括一個(gè)或者多個(gè)語(yǔ)句，且每個(gè)語(yǔ)句包括一個(gè)或者多個(gè)詞；獲取用戶(hù)語(yǔ)音的用戶(hù)韻律特征；以及基于預(yù)定文本對(duì)應(yīng)的參考韻律特征與用戶(hù)韻律特征之間的相關(guān)性，計(jì)算用戶(hù)語(yǔ)音的語(yǔ)音質(zhì)量。

根據(jù)本發(fā)明的另一個(gè)方面，還提供了一種數(shù)據(jù)處理方法，該方法適于在服務(wù)器中執(zhí)行，并包括如下步驟：存儲(chǔ)預(yù)定文本和與預(yù)定文本對(duì)應(yīng)的參考語(yǔ)音；以及計(jì)算參考語(yǔ)音中與預(yù)定文本的每個(gè)語(yǔ)句對(duì)應(yīng)的語(yǔ)音段的基頻曲線(xiàn)的各個(gè)分段多項(xiàng)式，并將所計(jì)算的各個(gè)分段多項(xiàng)式與預(yù)定文本中的每個(gè)語(yǔ)句相關(guān)聯(lián)地存儲(chǔ)，或根據(jù)所計(jì)算的各個(gè)分段多項(xiàng)式獲得參考語(yǔ)音的參考韻律特征并保存該參考韻律特征。