[發(fā)明專利]補(bǔ)償耳內(nèi)音頻信號的方法、電子裝置及記錄介質(zhì)

有效

• 申請?zhí)枺?/td>: 201910476957.6
• 申請日: 2019-06-03
• 公開（公告）號: CN110837353B
• 公開（公告）日: 2023-03-31
• 發(fā)明（設(shè)計(jì)）人: 蕭堯;曾恕宏
• 申請（專利權(quán)）人: 宏達(dá)國際電子股份有限公司
• 主分類號: G06F3/16
• 分類號: G06F3/16;G10L25/30
• 代理公司: 北京市柳沈律師事務(wù)所 11105
• 代理人: 徐協(xié)成

本發(fā)明提供一種補(bǔ)償耳內(nèi)音頻信號的方法、電子裝置及記錄介質(zhì)。此方法適用于具有處理器的電子裝置。此方法在訓(xùn)練階段利用耳內(nèi)麥克風(fēng)提取使用者說話時(shí)經(jīng)由內(nèi)耳傳遞的耳內(nèi)音頻信號，并利用外部麥克風(fēng)提取使用者說話時(shí)經(jīng)由空氣傳遞的外部音頻信號。之后，針對目標(biāo)函數(shù)建立音頻信號的機(jī)器學(xué)習(xí)模型，并使用耳內(nèi)音頻信號與外部音頻信號訓(xùn)練機(jī)器學(xué)習(xí)模型。最后，在線上階段使用訓(xùn)練后的機(jī)器學(xué)習(xí)模型將耳內(nèi)麥克風(fēng)提取的耳內(nèi)音頻信號轉(zhuǎn)換為補(bǔ)償音頻信號，并輸出補(bǔ)償音頻信號。

技術(shù)領(lǐng)域

本發(fā)明涉及一種音頻轉(zhuǎn)換技術(shù)，且特別涉及一種補(bǔ)償耳內(nèi)音頻信號的方法、具有補(bǔ)償耳內(nèi)音頻信號功能的電子裝置以及記錄介質(zhì)。

背景技術(shù)

隨著科技不斷進(jìn)步，個(gè)人電子產(chǎn)品無不朝向輕巧迷你化的趨勢發(fā)展。目前而言，為了縮小耳機(jī)的體積并使耳機(jī)同時(shí)兼顧發(fā)出聲音及收集聲音兩種功能，廠商將耳機(jī)與麥克風(fēng)設(shè)置在同一殼體內(nèi)而設(shè)計(jì)各種無線耳機(jī)麥克風(fēng)，并且采用藍(lán)牙通信使得無線耳機(jī)麥克風(fēng)可以與其他電子裝置建立連線。另外，為了避免無線耳機(jī)麥克風(fēng)在嘈雜的環(huán)境中可能受到環(huán)境聲音的影響而無法清楚地收集到使用者發(fā)出的聲音，有些廠商采用耳內(nèi)麥克風(fēng)收集從使用者的耳道發(fā)出的聲音。

然而，從耳道傳遞的聲音是從使用者體內(nèi)的聲帶發(fā)聲并且通過體內(nèi)各個(gè)構(gòu)造像是耳咽管等傳遞，在聲帶發(fā)出的高頻經(jīng)過這些狹小管道的傳遞后，高頻因?yàn)槟芰坎淮笏匀菀姿p，導(dǎo)致我們聽起來聲音悶悶的。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明提供一種補(bǔ)償耳內(nèi)音頻信號的方法、電子裝置及記錄介質(zhì)，其可將使用者說話時(shí)經(jīng)由內(nèi)耳傳遞的耳內(nèi)音頻信號轉(zhuǎn)換為接近經(jīng)由空氣傳遞的音頻信號。

本發(fā)明提供一種補(bǔ)償耳內(nèi)音頻信號的方法，適用于具有處理器的電子裝置，所述電子裝置連接至配置于使用者耳內(nèi)的耳內(nèi)麥克風(fēng)及耳外的外部麥克風(fēng)。所述方法包括下列步驟。在訓(xùn)練階段利用耳內(nèi)麥克風(fēng)提取使用者說話時(shí)經(jīng)由內(nèi)耳傳遞的耳內(nèi)音頻信號，并利用外部麥克風(fēng)提取使用者說話時(shí)經(jīng)由空氣傳遞的外部音頻信號。針對目標(biāo)函數(shù)建立音頻信號的機(jī)器學(xué)習(xí)模型，并使用耳內(nèi)音頻信號與外部音頻信號訓(xùn)練機(jī)器學(xué)習(xí)模型。以及在線上階段使用訓(xùn)練后的機(jī)器學(xué)習(xí)模型將耳內(nèi)麥克風(fēng)提取的耳內(nèi)音頻信號轉(zhuǎn)換為補(bǔ)償音頻信號，并輸出補(bǔ)償音頻信號。

在本發(fā)明的一實(shí)施例中，上述針對目標(biāo)函數(shù)建立音頻信號的機(jī)器學(xué)習(xí)模型，并使用耳內(nèi)音頻信號與外部音頻信號訓(xùn)練機(jī)器學(xué)習(xí)模型的步驟包括：設(shè)置耳內(nèi)音頻信號為機(jī)器學(xué)習(xí)模型的輸入層，以及設(shè)置外部音頻信號為機(jī)器學(xué)習(xí)模型的輸出層。以及通過輸入層及輸出層訓(xùn)練機(jī)器學(xué)習(xí)模型以提取耳內(nèi)音頻信號以及外部音頻信號之間的音頻信號特征。

在本發(fā)明的一實(shí)施例中，上述在線上階段使用訓(xùn)練后的機(jī)器學(xué)習(xí)模型將耳內(nèi)麥克風(fēng)提取的耳內(nèi)音頻信號轉(zhuǎn)換為補(bǔ)償音頻信號的步驟包括：使用音頻信號特征將耳內(nèi)音頻信號轉(zhuǎn)換為補(bǔ)償音頻信號。

在本發(fā)明的一實(shí)施例中，上述機(jī)器學(xué)習(xí)模型包括卷積神經(jīng)網(wǎng)絡(luò)或深度神經(jīng)網(wǎng)絡(luò)。

在本發(fā)明的一實(shí)施例中，上述針對目標(biāo)函數(shù)建立音頻信號的機(jī)器學(xué)習(xí)模型，并使用耳內(nèi)音頻信號與外部音頻信號訓(xùn)練機(jī)器學(xué)習(xí)模型包括：基于語音質(zhì)量設(shè)定目標(biāo)函數(shù)以建立并訓(xùn)練語音質(zhì)量模型，和/或基于語音的辨識率設(shè)定目標(biāo)函數(shù)以建立并訓(xùn)練語音辨識度模型。

在本發(fā)明的一實(shí)施例中，上述補(bǔ)償耳內(nèi)音頻信號的方法還包括：在線上階段根據(jù)電子裝置執(zhí)行的應(yīng)用程序決定使用訓(xùn)練后的語音質(zhì)量模型與語音辨識度模型的至少其中之一將耳內(nèi)音頻信號轉(zhuǎn)換為補(bǔ)償音頻信號。

在本發(fā)明的一實(shí)施例中，上述補(bǔ)償耳內(nèi)音頻信號的方法還包括：若電子裝置執(zhí)行的應(yīng)用程序涉及語音通話，則使用語音質(zhì)量模型將耳內(nèi)音頻信號轉(zhuǎn)換為補(bǔ)償音頻信號。

在本發(fā)明的一實(shí)施例中，上述補(bǔ)償耳內(nèi)音頻信號的方法還包括：若電子裝置執(zhí)行的應(yīng)用程序涉及語音辨識，則使用語音辨識度模型將耳內(nèi)音頻信號轉(zhuǎn)換為補(bǔ)償音頻信號。

在本發(fā)明的一實(shí)施例中，上述補(bǔ)償耳內(nèi)音頻信號的方法還包括：對轉(zhuǎn)換后的補(bǔ)償音頻信號進(jìn)行語音辨識，并輸出語音辨識結(jié)果。