[發明專利]一種韻律預測的方法、裝置、設備及存儲介質

在審

• 申請號: 202010970974.8
• 申請日: 2020-09-15
• 公開（公告）號: CN112216267A
• 公開（公告）日: 2021-01-12
• 發明（設計）人: 吳帥;李健;武衛東;陳明
• 申請（專利權）人: 北京捷通華聲科技股份有限公司
• 主分類號: G10L13/10
• 分類號: G10L13/10;G10L13/08;G06F40/30
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 莎日娜

1.一種韻律預測的方法，其特征在于，所述方法包括：

獲得待合成文本的語義向量；

對所述待合成文本的每個停頓標記進行向量轉換，得到所述待合成文本的標記向量；

合并所述語義向量和所述標記向量，得到第一特征向量；

將所述第一特征向量輸入預設的韻律預測模型，得到所述待合成文本的韻律信息。

2.根據權利要求1所述的方法，其特征在于，所述語義向量包括字向量和詞向量；獲得待合成文本的語義向量，包括：

清除所述待合成文本的標點；

對清除標點后的待合成文本的每個文字進行向量轉換，得到所述字向量；

對清除標點后的待合成文本進行分詞，得到多個詞語；

根據每個詞語的組成文字，對所述多個詞語進行向量轉換，得到所述詞向量。

3.根據權利要求1所述的方法，其特征在于，所述方法還包括：

獲得具有正確標點的文本樣本；

利用第一占位標記替換所述文本樣本中的文字，得到停頓標記樣本；

對所述停頓標記樣本進行向量轉換，得到標記樣本向量；

對所述文本樣本進行韻律標注，得到韻律標記；

清除所述文本樣本中的標點，得到文字樣本；

對所述文字樣本進行向量轉換，得到語義向量樣本；

將所述語義向量樣本輸入第一預設模型，得到中間向量；

將所述中間向量和所述標記樣本向量輸入第二預設模型，得到預測韻律信息；

根據所述預測韻律信息和所述韻律標記的損失函數的取值，對所述第一預設模型和所述第二預設模型分別進行修正；

將修正后的所述第一預設模型和修正后的所述第二預設模型結合，得到所述預設的韻律預測模型。

4.根據權利要求3所述的方法，其特征在于，所述方法還包括：

刪除或替換所述文本樣本中的部分標點，得到所述文本樣本的對照樣本；

利用第二占位標記替換所述對照樣本中的文字，得到對照停頓標記樣本；

對所述對照停頓標記樣本進行向量轉換，得到對照標記樣本向量；

分別將所述標記樣本向量和所述對照標記樣本向量，與所述語義向量樣本合并，得到第二特征向量和第三特征向量；

將所述語義向量樣本輸入第一預設模型，得到中間向量，包括：

分別將所述第二特征向量和所述第三特征向量輸入所述第一預設模型，得到對應所述第二特征向量的第一中間向量和對應所述第三特征向量的第二中間向量。

5.根據權利要求3所述的方法，其特征在于，將所述中間向量和所述標記樣本向量輸入第二預設模型，得到預測韻律信息，包括：

所述中間向量和所述標記樣本向量按照各自在所述第二預設模型的權重參數，參與所述第二預設模型的計算，得到所述預測韻律信息；

在得到預測韻律信息后，所述方法還包括：

將所述預測韻律信息輸入韻律條件隨機場模型，得到調整后的預測韻律信息；

根據所述預測韻律信息和所述韻律標記的損失函數的取值，對所述第一預設模型和所述第二預設模型分別進行修正，包括：

根據所述調整后的預測韻律信息和所述韻律標記的損失函數的取值，調整所述第一預設模型的參數；

根據所述調整后的預測韻律信息和所述韻律標記的損失函數的取值，調整所述權重參數。

6.一種韻律預測的裝置，其特征在于，所述裝置包括：

語義向量獲得模塊，用于獲得待合成文本的語義向量；

第一標記向量轉換模塊，用于對所述待合成文本的每個停頓標記進行向量轉換，得到所述待合成文本的標記向量；

第一合并模塊，用于合并所述語義向量和所述標記向量，得到第一特征向量；

第一韻律預測模塊，用于將所述第一特征向量輸入預設的韻律預測模型，得到所述待合成文本的韻律信息。