[發(fā)明專利]基于神經(jīng)網(wǎng)絡(luò)的全語通的實現(xiàn)方法及相關(guān)產(chǎn)品

在審

• 申請?zhí)枺?/td>: 201910173053.6
• 申請日: 2019-03-07
• 公開（公告）號: CN110047505A
• 公開（公告）日: 2019-07-23
• 發(fā)明（設(shè)計）人: 廖德南
• 申請（專利權(quán)）人: 永德利硅橡膠科技（深圳）有限公司
• 主分類號: G10L25/30
• 分類號: G10L25/30;G06F17/28
• 代理公司: 深圳市科冠知識產(chǎn)權(quán)代理有限公司 44355
• 代理人: 王海駿;孔麗霞

1.一種基于神經(jīng)網(wǎng)絡(luò)的全語通的實現(xiàn)方法，其特征在于，所述方法包括如下步驟：

終端接收用戶的第一語言的第一語音，確定終端通話所需的第二語言；

終端將第一語言以及第二語言發(fā)送至網(wǎng)絡(luò)側(cè)，接收網(wǎng)絡(luò)側(cè)下發(fā)的神經(jīng)網(wǎng)絡(luò)模型的第一參數(shù)，終端將第一參數(shù)加載至神經(jīng)網(wǎng)絡(luò)模型；

終端將第一語音輸入到神經(jīng)網(wǎng)絡(luò)模型執(zhí)行多層神經(jīng)網(wǎng)絡(luò)運算得到符合第二語言的第二語音，將第二語音通過網(wǎng)絡(luò)發(fā)送至通話端。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述終端將第一語音輸入到神經(jīng)網(wǎng)絡(luò)模型執(zhí)行多層神經(jīng)網(wǎng)絡(luò)運算得到符合第二語言的第二語音具體包括：

終端依據(jù)第一語音得到輸入數(shù)據(jù)，將輸入數(shù)據(jù)輸入到多層神經(jīng)網(wǎng)絡(luò)執(zhí)行n層卷積運算得到卷積運算結(jié)果，將卷積運算結(jié)果輸入到全連接運算得到第二語音的第二語音。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述執(zhí)行n層卷積運算中的第一層卷積運算具體包括：

確定輸入數(shù)據(jù)矩陣【H】【W(wǎng)】,第一層卷積運算的卷積核【CI】【3】【3】,將輸入矩陣【H】【W(wǎng)】劃分成H/3個數(shù)據(jù)塊，所述H/3個數(shù)據(jù)塊中每個數(shù)據(jù)塊中元素值按H方向相鄰存儲，將卷積核【CI】【3】【3】劃分成CI個【3】【3】核塊，所述CI個【3】【3】核塊中每個核塊的元素值相鄰存儲，將輸入數(shù)據(jù)矩陣【H】【W(wǎng)】與卷積核【CI】【3】【3】執(zhí)行卷積運算得到第一層卷積計算結(jié)果。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述確定終端通話所需的第二語言具體可以包括：

終端提取通話端的用戶，向網(wǎng)絡(luò)側(cè)請求該用戶對應(yīng)的國籍，接收網(wǎng)絡(luò)側(cè)返回的該用戶登記的國籍，確定該國籍對應(yīng)的母語為第二語言。

5.一種終端，其特征在于，所述終端包括：

音頻單元，用于接收用戶的第一語言的第一語音；

處理單元，用于確定終端通話所需的第二語言；控制通信單元將第一語言以及第二語言發(fā)送至網(wǎng)絡(luò)側(cè)，控制所述通信單元接收網(wǎng)絡(luò)側(cè)下發(fā)的神經(jīng)網(wǎng)絡(luò)模型的第一參數(shù)，將第一參數(shù)加載至神經(jīng)網(wǎng)絡(luò)模型；將第一語音輸入到神經(jīng)網(wǎng)絡(luò)模型執(zhí)行多層神經(jīng)網(wǎng)絡(luò)運算得到符合第二語言的第二語音，控制所述通信單元將第二語音通過網(wǎng)絡(luò)發(fā)送至通話端。

6.根據(jù)權(quán)利要求5所述的終端，其特征在于，

所述處理單元，具體用于依據(jù)第一語音得到輸入數(shù)據(jù)，將輸入數(shù)據(jù)輸入到多層神經(jīng)網(wǎng)絡(luò)執(zhí)行n層卷積運算得到卷積運算結(jié)果，將卷積運算結(jié)果輸入到全連接運算得到第二語音的第二語音。

7.根據(jù)權(quán)利要求6所述的終端，其特征在于，

所述處理單元，具體用于確定輸入數(shù)據(jù)矩陣【H】【W(wǎng)】,第一層卷積運算的卷積核【CI】【3】【3】,將輸入矩陣【H】【W(wǎng)】劃分成H/3個數(shù)據(jù)塊，所述H/3個數(shù)據(jù)塊中每個數(shù)據(jù)塊中元素值按H方向相鄰存儲，將卷積核【CI】【3】【3】劃分成CI個【3】【3】核塊，所述CI個【3】【3】核塊中每個核塊的元素值相鄰存儲，將輸入數(shù)據(jù)矩陣【H】【W(wǎng)】與卷積核【CI】【3】【3】執(zhí)行卷積運算得到第一層卷積計算結(jié)果。

8.根據(jù)權(quán)利要求5所述的終端，其特征在于，

所述處理單元，具體用于提取通話端的用戶，向網(wǎng)絡(luò)側(cè)請求該用戶對應(yīng)的國籍，接收網(wǎng)絡(luò)側(cè)返回的該用戶登記的國籍，確定該國籍對應(yīng)的母語為第二語言。

9.根據(jù)權(quán)利要求5-8任意一項所述的終端，其特征在于，

所述終端為：智能手機或平板電腦。

10.一種計算機可讀存儲介質(zhì)，其特征在于，其存儲用于電子數(shù)據(jù)交換的計算機程序，其中，所述計算機程序使得計算機執(zhí)行如權(quán)利要求1-4任意一項所述的方法。