[發(fā)明專利]同聲翻譯方法、裝置和計算機設(shè)備有效
| 申請?zhí)枺?/td> | 201810975682.6 | 申請日： | 2018-08-24 |
| 公開（公告）號： | CN110147554B | 公開（公告）日： | 2023-08-22 |
| 發(fā)明（設(shè)計）人： | 孟凡東;翟俊杰;楊月奎;王迪 | 申請（專利權(quán)）人： | 騰訊科技（深圳）有限公司 |
| 主分類號： | G06F40/58 | 分類號： | G06F40/58 |
| 代理公司： | 北京勵誠知識產(chǎn)權(quán)代理有限公司 11647 | 代理人： | 賈玉姣 |
| 地址： | 518057 廣東省深圳*** | 國省代碼： | 廣東;44 |
| 權(quán)利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關(guān)鍵詞： | 同聲翻譯 方法 裝置 計算機 設(shè)備 | ||
1.一種同聲翻譯方法，其特征在于，包括：
獲取待翻譯的源語言語音信號；
對所述源語言語音信號進行語音識別，生成源語言詞匯序列和源語言拼音序列；
將所述源語言詞匯序列和所述源語言拼音序列分別輸入對應(yīng)的編碼器，獲取與源語言語音信號對應(yīng)的詞匯向量序列和拼音向量序列；
將所述詞匯向量序列輸入詞匯注意力模型，確定與所述源語言語音信號對應(yīng)的目標語言序列中待生成的當前目標詞語對應(yīng)的詞匯上下文向量序列；
將所述拼音向量序列輸入拼音注意力模型，確定與所述當前目標詞語對應(yīng)的拼音上下文向量序列；
將所述詞匯上下文向量序列和所述拼音上下文向量序列輸入解碼器，生成所述當前目標詞語；
其中，所述將所述詞匯向量序列輸入詞匯注意力模型，確定與所述源語言語音信號對應(yīng)的目標語言序列中待生成的當前目標詞語對應(yīng)的詞匯上下文向量序列，包括：
將所述詞匯向量序列以及所述當前目標詞語的前一目標詞語對應(yīng)的解碼器狀態(tài)輸入所述詞匯注意力模型，確定與所述當前目標詞語對應(yīng)的詞匯上下文向量序列；
其中，所述將所述拼音向量序列輸入拼音注意力模型，確定與所述當前目標詞語對應(yīng)的拼音上下文向量序列，包括：
將所述拼音向量序列以及所述前一目標詞語對應(yīng)的解碼器狀態(tài)輸入所述拼音注意力模型，確定與所述當前目標詞語對應(yīng)的拼音上下文向量序列。
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將所述詞匯上下文向量序列和所述拼音上下文向量序列輸入解碼器，生成所述當前目標詞語，包括：
將所述詞匯上下文向量序列和所述拼音上下文向量序列輸入解碼神經(jīng)網(wǎng)絡(luò)，確定與所述當前目標詞語對應(yīng)的解碼器狀態(tài)；
將所述詞匯上下文向量序列、所述拼音上下文向量序列以及所述當前目標詞語對應(yīng)的解碼器狀態(tài)輸入輸出層神經(jīng)網(wǎng)絡(luò)，生成所述當前目標詞語。
3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將所述源語言詞匯序列和所述源語言拼音序列分別輸入對應(yīng)的編碼器，獲取與源語言語音信號對應(yīng)的詞匯向量序列和拼音向量序列之前，還包括：
獲取訓(xùn)練數(shù)據(jù)；所述訓(xùn)練數(shù)據(jù)中包括：超過預(yù)設(shè)數(shù)量閾值的訓(xùn)練樣本；所述訓(xùn)練樣本中包括：目標語言序列樣本，以及與所述目標語言序列樣本對應(yīng)的源語言詞匯序列樣本和源語言拼音序列樣本；
采用所述訓(xùn)練數(shù)據(jù)對所述編碼器和所述解碼器進行訓(xùn)練。
4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述采用所述訓(xùn)練數(shù)據(jù)對所述編碼器和所述解碼器進行訓(xùn)練之前，還包括：
針對所述源語言詞匯序列樣本中的詞匯，獲取所述詞匯對應(yīng)的同音詞匯；
根據(jù)所述源語言詞匯序列樣本，以及所述詞匯對應(yīng)的同音詞匯，生成與所述源語言詞匯序列樣本對應(yīng)的擴展詞匯序列樣本；
根據(jù)所述擴展詞匯序列樣本，以及所述源語言詞匯序列樣本對應(yīng)的源語言拼音序列樣本和目標語言序列樣本，生成擴展訓(xùn)練樣本；
將所述擴展訓(xùn)練樣本添加到所述訓(xùn)練數(shù)據(jù)中。
5.一種同聲翻譯裝置，其特征在于，包括：
獲取模塊，用于獲取待翻譯的源語言語音信號；
識別模塊，用于對所述源語言語音信號進行語音識別，生成源語言詞匯序列和源語言拼音序列；
所述獲取模塊，還用于將所述源語言詞匯序列和所述源語言拼音序列分別輸入對應(yīng)的編碼器，獲取與源語言語音信號對應(yīng)的詞匯向量序列和拼音向量序列；
所述獲取模塊，還用于將所述詞匯向量序列輸入詞匯注意力模型，確定與所述源語言語音信號對應(yīng)的目標語言序列中待生成的當前目標詞語對應(yīng)的詞匯上下文向量序列；將所述拼音向量序列輸入拼音注意力模型，確定與所述當前目標詞語對應(yīng)的拼音上下文向量序列；將所述詞匯上下文向量序列和所述拼音上下文向量序列輸入解碼器，生成所述當前目標詞語；
其中，所述獲取模塊具體用于，
將所述詞匯向量序列以及所述當前目標詞語的前一目標詞語對應(yīng)的解碼器狀態(tài)輸入所述詞匯注意力模型，確定與所述當前目標詞語對應(yīng)的詞匯上下文向量序列；
將所述拼音向量序列以及所述前一目標詞語對應(yīng)的解碼器狀態(tài)輸入所述拼音注意力模型，確定與所述當前目標詞語對應(yīng)的拼音上下文向量序列。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息，商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于騰訊科技（深圳）有限公司，未經(jīng)騰訊科技（深圳）有限公司許可，擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作，請聯(lián)系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/201810975682.6/1.html，轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
