[發(fā)明專利]一種監(jiān)聽方法、裝置、存儲介質(zhì)及電子設(shè)備

有效

• 申請?zhí)枺?/td>: 202011296487.4
• 申請日: 2020-11-18
• 公開（公告）號: CN112420078B
• 公開（公告）日: 2022-12-30
• 發(fā)明（設(shè)計）人: 朱文博
• 申請（專利權(quán)）人: 青島海爾科技有限公司;海爾智家股份有限公司
• 主分類號: G10L25/78
• 分類號: G10L25/78;G10L25/63;G10L21/0272;G10L21/0208;G10L15/16
• 代理公司: 北京康信知識產(chǎn)權(quán)代理有限責(zé)任公司 11240
• 代理人: 趙靜

1.一種監(jiān)聽方法，其特征在于，包括：

監(jiān)聽音頻信號；

對監(jiān)聽到的音頻信號進(jìn)行第一檢測，以獲取所述音頻信號中包括的由目標(biāo)對象發(fā)出的目標(biāo)音頻信號；

對所述目標(biāo)音頻信號進(jìn)行第二檢測，以獲取所述目標(biāo)音頻信號對應(yīng)的聲音類型信息；

根據(jù)所述聲音類型信息，發(fā)送目標(biāo)提示信息至終端；

所述對所述目標(biāo)音頻信號進(jìn)行第二檢測，以獲取所述目標(biāo)音頻信號對應(yīng)的聲音類型信息包括：提取所述目標(biāo)音頻信號的音頻特征，對所述音頻特征進(jìn)行增強(qiáng)，以得到目標(biāo)音頻特征；將所述目標(biāo)音頻特征輸入至目標(biāo)分類模型中，以確定所述目標(biāo)音頻信號對應(yīng)的初始聲音類型信息；在所述初始聲音類型信息指示所述目標(biāo)音頻信號為目標(biāo)類型的音頻信號的情況下，根據(jù)所述第一檢測的檢測結(jié)果及所述初始聲音類型信息，確定所述目標(biāo)音頻信號的音高等級，其中，所述第一檢測的檢測結(jié)果包括所述目標(biāo)音頻信號的信噪比；將所述音高等級及所述初始聲音類型信息確定為所述聲音類型信息；

提取所述目標(biāo)音頻信號的音頻特征，對所述音頻特征進(jìn)行增強(qiáng)包括：對兩個信號通道的所述目標(biāo)音頻信號的音頻特征進(jìn)行求均值以及求差運(yùn)算，得到兩個信號通道的音頻特征的相似點以及差異點，基于所述相似點以及所述差異點通過諧波沖擊源分離方式對所述音頻特征進(jìn)行增強(qiáng)。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述監(jiān)聽音頻信號包括：

監(jiān)聽目標(biāo)環(huán)境中的連續(xù)音頻信號，其中，所述連續(xù)音頻信號以幀為單位被監(jiān)聽。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述監(jiān)聽音頻信號還包括：

檢測目標(biāo)環(huán)境中是否存在第一對象，其中，所述目標(biāo)環(huán)境為所述目標(biāo)對象所處的環(huán)境；

在確定所述目標(biāo)環(huán)境中不存在所述第一對象的情況下，實時監(jiān)聽所述音頻信號。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述提取所述目標(biāo)音頻信號的音頻特征包括：

將所述目標(biāo)音頻信號輸入至目標(biāo)信號通道；

對輸入至所述目標(biāo)信號通道中的目標(biāo)音頻信號進(jìn)行目標(biāo)運(yùn)算，以得到目標(biāo)信號通道中的目標(biāo)音頻信號的音頻特征。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述對輸入至所述目標(biāo)信號通道中的目標(biāo)音頻信號進(jìn)行目標(biāo)運(yùn)算，以得到目標(biāo)信號通道中的音頻片段的音頻特征包括：

對所述目標(biāo)信號通道中的目標(biāo)音頻信號進(jìn)行求均值運(yùn)算，以得到目標(biāo)信號通道中的目標(biāo)音頻信號的相似特征；

對所述目標(biāo)信號通道中的目標(biāo)音頻信號進(jìn)行求差運(yùn)算，以得到目標(biāo)信號通道中的目標(biāo)音頻信號的差異特征。

6.一種監(jiān)聽裝置，其特征在于，包括：

音頻監(jiān)聽模塊，用于監(jiān)聽音頻信號；

第一檢測模塊，用于對監(jiān)聽到的音頻信號進(jìn)行第一檢測，以獲取所述音頻信號中包括的由目標(biāo)對象發(fā)出的目標(biāo)音頻信號；

第二檢測模塊，用于對所述目標(biāo)音頻信號進(jìn)行第二檢測，以獲取所述目標(biāo)音頻信號對應(yīng)的聲音類型信息；

信息發(fā)送模塊，用于根據(jù)所述聲音類型信息，發(fā)送目標(biāo)提示信息至終端；

所述第二檢測模塊包括：特征提取單元，用于提取所述目標(biāo)音頻信號的音頻特征，對所述音頻特征進(jìn)行增強(qiáng)，以得到目標(biāo)音頻特征；特征分類單元，用于將所述目標(biāo)音頻特征輸入至目標(biāo)分類模型中，以確定所述目標(biāo)音頻信號對應(yīng)的初始聲音類型信息；音高確定單元，用于在所述初始聲音類型信息指示所述目標(biāo)音頻信號為目標(biāo)類型的音頻信號的情況下，根據(jù)所述第一檢測的檢測結(jié)果及所述初始聲音類型信息，確定所述目標(biāo)音頻信號的音高等級，其中，所述第一檢測的檢測結(jié)果包括所述目標(biāo)音頻信號的信噪比；類型確定單元，用于將所述音高等級及所述初始聲音類型信息確定為所述聲音類型信息；

所述特征提取單元通過如下方式實現(xiàn)提取所述目標(biāo)音頻信號的音頻特征，對所述音頻特征進(jìn)行增強(qiáng)：對兩個信號通道的所述目標(biāo)音頻信號的音頻特征進(jìn)行求均值以及求差運(yùn)算，得到兩個信號通道的音頻特征的相似點以及差異點，基于所述相似點以及所述差異點通過諧波沖擊源分離方式對所述音頻特征進(jìn)行增強(qiáng)。

7.一種存儲介質(zhì)，其特征在于，所述存儲介質(zhì)中存儲有計算機(jī)程序，其中，所述計算機(jī)程序被設(shè)置為運(yùn)行時執(zhí)行所述權(quán)利要求1至5任一項中所述的方法。

8.一種電子裝置，包括存儲器和處理器，其特征在于，所述存儲器中存儲有計算機(jī)程序，所述處理器被設(shè)置為運(yùn)行所述計算機(jī)程序以執(zhí)行所述權(quán)利要求1至5任一項中所述的方法。