[發明專利]動態目標聲源跟蹤監測方法及終端設備

有效

• 申請號: 202010431768.X
• 申請日: 2020-05-20
• 公開（公告）號: CN111580049B
• 公開（公告）日: 2023-07-14
• 發明（設計）人: 賀武君;王峰;黨建新;魏鑫;南飛雁;朱永康;張二標
• 申請（專利權）人: 陜西金蝌蚪智能科技有限公司
• 主分類號: G01S5/18
• 分類號: G01S5/18
• 代理公司: 北京市京師律師事務所 11665
• 代理人: 高曉麗

1.一種動態目標聲源跟蹤監測方法，其特征在于，包括：

獲取目標聲源的多通道聲信號；

對所述多通道聲信號進行聲場重建處理，得到所述目標聲源在預定區域的聲場；所述對所述多通道聲信號進行聲場重建處理，得到所述目標聲源在預定區域的聲場，包括：依據所述多通道聲信號，確定聲信號協方差矩陣；基于預設的信號相關信息，確定導向矢量以及所述導向矢量的共軛矢量；依據所述聲信號協方差矩陣、所述導向矢量以及所述共軛矢量的乘積，確定所述目標聲源在預定區域的聲場；

基于所述聲場，確定所述目標聲源的位置；所述基于所述聲場，確定所述目標聲源的位置，包括：確定所述聲場對應的最大聲場值；依據所述最大聲場值對應的位置，確定所述目標聲源的方位角和俯仰角；依據所述目標聲源的位置，判斷所述目標聲源是否位于預設的圖像采集設備的視場范圍；所述依據所述目標聲源的位置，判斷所述目標聲源是否位于預設的圖像采集設備的視場范圍，包括：將所述目標聲源的所述方位角和所述俯仰角，分別與預定義的所述圖像采集設備的方位角范圍和俯仰角范圍進行比較；依據比較結果，判斷所述目標聲源是否位于預設的圖像采集設備的視場范圍；

若所述目標聲源位于預設的圖像采集設備的視場范圍，則確定與所述多通道聲信號對應的視頻幀圖像；

依據所述目標聲源的聲場和所述視頻幀圖像，對所述目標聲源進行定位處理；其中，所述依據所述目標聲源的聲場和所述視頻幀圖像，對所述目標聲源進行定位處理，包括：對所述聲場進行邊緣化處理；基于預配置的多種聲場值范圍分別對應的RGB轉換規則，對邊緣化處理后的所述聲場進行RGB參數轉換，得到偽彩圖像；將所述偽彩圖像和所述視頻幀圖像的同一像素位置的RGB參數，進行加權相加處理，得到融合圖像；在所述融合圖像上對所述目標聲源的位置進行顯示處理。

2.根據權利要求1所述的方法，其特征在于，所述確定與所述多通道聲信號對應的視頻幀圖像，包括：

依據所述多通道聲信號的時間標簽，確定與所述多通道聲信號對應的視頻幀圖像。

3.根據權利要求1所述的方法，其特征在于，所述對所述目標聲源的聲場進行邊緣化處理，包括：

確定所述聲場的各個位置分別對應的初始聲場值；

將所述聲場的各個位置分別對應的初始聲場值，分別與預設的聲場門限值進行比較；

依據比較結果，得到所述聲場的各個位置分別對應的目標聲場值。

4.一種動態目標聲源跟蹤監測裝置，其特征在于，包括：

聲信號獲取模塊，用于獲取目標聲源的多通道聲信號；

聲場確定模塊，用于對所述多通道聲信號進行聲場重建處理，得到所述目標聲源在預定區域的聲場；聲場確定模塊用于：依據多通道聲信號，確定聲信號協方差矩陣；基于預設的信號相關信息，確定導向矢量以及導向矢量的共軛矢量；依據聲信號協方差矩陣、導向矢量以及共軛矢量的乘積，確定目標聲源在預定區域的聲場；

聲源位置確定模塊，用于基于所述聲場，確定所述目標聲源的位置；所述聲源位置確定模塊用于：確定聲場對應的最大聲場值；依據最大聲場值對應的位置，確定目標聲源的方位角和俯仰角；

視場區域判斷模塊，用于依據所述目標聲源的位置，判斷所述目標聲源是否位于預設的圖像采集設備的視場范圍；所述視場區域判斷模塊用于：將目標聲源的方位角和俯仰角，分別與預定義的圖像采集設備的方位角范圍和俯仰角范圍進行比較；依據比較結果，判斷目標聲源是否位于預設的圖像采集設備的視場范圍；

視頻幀圖像確定模塊，用于若所述目標聲源位于預設的圖像采集設備的視場范圍，則確定與所述多通道聲信號對應的視頻幀圖像；

聲源定位處理模塊，用于依據所述目標聲源的聲場和所述視頻幀圖像，對所述目標聲源進行定位處理；所述聲源定位處理模塊用于：對聲場進行邊緣化處理；基于預配置的多種聲場值范圍分別對應的RGB轉換規則，對邊緣化處理后的聲場進行RGB參數轉換，得到偽彩圖像；將偽彩圖像和視頻幀圖像的同一像素位置的RGB參數，進行加權相加處理，得到融合圖像；在融合圖像上對目標聲源的位置進行顯示處理。

5.一種終端設備，包括：存儲器、處理器及存儲在該存儲器上并可在該處理器上運行的計算機程序，其特征在于，所述處理器執行所述計算機程序以實現權利要求1至3中任一項所述的方法。

6.一種計算機可讀存儲介質，存儲有計算機可執行指令，所述計算機可執行指令用于執行權利要求1至3中任一項所述的方法。