[發(fā)明專利]一種深度學(xué)習(xí)中端到端的寵物語(yǔ)言翻譯方法

在審

• 申請(qǐng)?zhí)枺?/td>: 202111188371.3
• 申請(qǐng)日: 2021-10-12
• 公開(kāi)（公告）號(hào): CN114023337A
• 公開(kāi)（公告）日: 2022-02-08
• 發(fā)明（設(shè)計(jì)）人: 王峰;李夢(mèng)君;屈俊峰;黃金洲;國(guó)冰磊;孫成嬌
• 申請(qǐng)（專利權(quán)）人: 湖北文理學(xué)院
• 主分類號(hào): G10L17/26
• 分類號(hào): G10L17/26;G10L17/18
• 代理公司: 武漢科皓知識(shí)產(chǎn)權(quán)代理事務(wù)所(特殊普通合伙) 42222
• 代理人: 羅飛

1.一種深度學(xué)習(xí)中端到端的寵物語(yǔ)言翻譯方法，其特征在于，包括：

S1：讀取原始寵物音頻文件；

S2：從原始寵物音頻文件中提取寵物叫聲；

S3：將提取的寵物叫聲的音頻特征序列輸入預(yù)先構(gòu)建的端到端的寵物語(yǔ)言翻譯模型，其中，寵物語(yǔ)言翻譯模型包括音頻編碼器網(wǎng)絡(luò)、標(biāo)簽預(yù)測(cè)網(wǎng)絡(luò)、聯(lián)合網(wǎng)絡(luò)和全連接層，音頻編碼器網(wǎng)絡(luò)用于根據(jù)音頻特征序列獲取翻譯結(jié)果標(biāo)簽序列，標(biāo)簽預(yù)測(cè)網(wǎng)絡(luò)用于根據(jù)音頻編碼器網(wǎng)絡(luò)獲取的翻譯結(jié)果標(biāo)簽序列的上一翻譯結(jié)果標(biāo)簽序列得到預(yù)測(cè)結(jié)果序列，聯(lián)合網(wǎng)絡(luò)用于將音頻編碼器網(wǎng)絡(luò)和標(biāo)簽預(yù)測(cè)網(wǎng)絡(luò)的輸出進(jìn)行疊加，全連接層用于計(jì)算音頻特征序列與翻譯結(jié)果標(biāo)簽序列的匹配概率，基于匹配概率能夠得到最終翻譯結(jié)果。

2.如權(quán)利要求1所述的寵物語(yǔ)言翻譯方法，其特征在于，步驟S3中音頻編碼器網(wǎng)絡(luò)的計(jì)算過(guò)程為：

其中，t表示時(shí)間序列，u表示翻譯件結(jié)果標(biāo)簽序列的編號(hào)，表示音頻特征序列對(duì)應(yīng)的翻譯結(jié)果標(biāo)簽序列，f_t表示音頻編碼器網(wǎng)絡(luò)的輸出。

3.如權(quán)利要求1所述的寵物語(yǔ)言翻譯方法，其特征在于，步驟S3標(biāo)簽預(yù)測(cè)網(wǎng)絡(luò)的計(jì)算過(guò)程為：

其中，表示根據(jù)音頻編碼器網(wǎng)絡(luò)獲取的翻譯結(jié)果標(biāo)簽序列的上一翻譯結(jié)果標(biāo)簽序列，g_u-1表示預(yù)測(cè)結(jié)果序列。

4.如權(quán)利要求1所述的寵物語(yǔ)言翻譯方法，其特征在于，步驟S3聯(lián)合網(wǎng)絡(luò)的計(jì)算過(guò)程為：

h_t,u-1＝relu(f_t+g_u-1) (3)

h_t,u-1表示將音頻編碼器網(wǎng)絡(luò)的輸出f_t與標(biāo)簽預(yù)測(cè)網(wǎng)絡(luò)的輸出g_u-1進(jìn)行疊加后得到的結(jié)果，表示寵物叫聲在整個(gè)音頻文件中標(biāo)簽詞匯的分布概率。

5.如權(quán)利要求1所述的寵物語(yǔ)言翻譯方法，其特征在于，步驟S3全連接層的計(jì)算過(guò)程為：

表示音頻特征序列，表示根據(jù)音頻編碼器網(wǎng)絡(luò)獲取的翻譯結(jié)果標(biāo)簽序列的上一翻譯結(jié)果標(biāo)簽序列，W_o表示寵物叫聲的音頻特征序列f_t與預(yù)測(cè)結(jié)果序列g(shù)_u-1在聯(lián)合網(wǎng)絡(luò)h_t,u-1中進(jìn)行匹配的連接邊的權(quán)重，其中，權(quán)重越大，表明該叫聲被匹配的翻譯結(jié)果的分布概率越大。