[發明專利]一種智能遠程視頻會議系統

有效

• 申請號: 202010199405.8
• 申請日: 2020-03-20
• 公開（公告）號: CN111343411B
• 公開（公告）日: 2021-07-06
• 發明（設計）人: 李穎;劉波
• 申請（專利權）人: 青島海信智慧家居系統股份有限公司;海信集團有限公司
• 主分類號: H04N7/15
• 分類號: H04N7/15;G01S5/30
• 代理公司: 北京同達信恒知識產權代理有限公司 11291
• 代理人: 張懷陽

本發明公開了一種智能遠程視頻會議系統，該方法包括多個麥克風陣列系統、多個聲源跟蹤攝像機和中央控制系統，中央控制系統用于根據各麥克風陣列相對聲源的位置信息，確定出備選和有效的麥克風陣列，發送給備選和有效的麥克風陣列對應的聲源跟蹤攝像機，在接收到聲源跟蹤攝像機反饋的轉動角度和采集到的聲源處發言人的視頻流時，進行人臉識別分析，確定出聲源的位置信息，并將聲源的位置信息發送給聲源的位置信息對應的麥克風陣列，以使聲源的位置信息對應的麥克風陣列增強聲源的位置信息所在方向的聲音采集。通過布置多個麥克風陣列系統進行聲源定位，結合聲源跟蹤攝像機的位置矯正，可以提高聲源定位的準確度，從而提高會場音頻流的質量。

技術領域

本發明實施例涉及智慧家居技術領域，尤其涉及一種智能遠程視頻會議系統。

背景技術

目前最常用的聲源定位算法是TDOA，因其運算量較低，實時性好。但是也存在不足：1.定位時的時延值與已測得的時延值不同步；2.若房間內混響較強，信噪比較低時，將導致聲源定位誤差很大。但由于其運算量較低，在經過改進后，在一定噪聲和混響的環境下，仍能獲得較好的定位效果，因此被廣泛應用。

視頻會議中的音頻流質量是至關重要的，基于以上分析，單純使用TDOA算法進行聲源定位是不可行的，現有的改進主要有兩種，一是通過增加麥克風陣列的麥克風個數，麥克風個數的增加無疑增加了麥克風陣列的空間復雜度，預示著聲源定位算法的復雜度將會大大提高；二是結合其他算法，但是要想在大型會議室中達到良好的效果，算法的復雜度無疑被大大提高。這兩者都會使得聲源定位的效率大大降低，無法保證實時性。

發明內容

本發明實施例提供一種智能遠程視頻會議系統，用以提高聲源定位的效率，保證聲源定位的實時性。

第一方面，本發明實施例提供一種智能遠程視頻會議系統，包括：多個麥克風陣列系統、多個聲源跟蹤攝像機和中央控制系統；

所述多個麥克風陣列系統用于采集各麥克風陣列相對聲源的位置信息，并將所述各麥克風陣列相對聲源的位置信息發送給所述中央控制系統；

所述多個聲源跟蹤攝像機用于根據所述中央控制系統發送的備選和有效麥克風陣列相對聲源的位置信息，確定出采集到聲源處發言人的視頻流時攝像頭的轉動角度，并將所述轉動角度和采集到的聲源處發言人的視頻流發送給所述中央控制系統；所述多個麥克風陣列系統與所述多個聲源跟蹤攝像機一一對應；

所述中央控制系統用于根據所述各麥克風陣列相對聲源的位置信息，確定出備選和有效的麥克風陣列，將所述備選和有效的麥克風陣列相對聲源的位置信息發送給所述備選和有效的麥克風陣列對應的聲源跟蹤攝像機，在接收到所述聲源跟蹤攝像機反饋的所述轉動角度和采集到的聲源處發言人的視頻流時，進行人臉識別分析，確定出所述聲源的位置信息，并將所述聲源的位置信息發送給所述聲源的位置信息對應的麥克風陣列，以使所述聲源的位置信息對應的麥克風陣列增強所述聲源的位置信息所在方向的聲音采集，對采集的音視頻流進行合成。

上述技術方案中，通過在會場布置多個麥克風陣列系統進行聲源定位，結合聲源跟蹤攝像機的位置矯正，可以降低聲源定位的復雜度，提升聲源定位的效率，提高聲源定位的準確度，從而提高會場音頻流的質量。

可選的，所述中央控制系統包括音頻流的控制模塊、視頻流的控制模塊和音視頻處理模塊；

所述音頻流的控制模塊包括聲源定位決策模塊，用于根據所述各麥克風陣列相對聲源的位置信息，確定出備選和有效的麥克風陣列，以及在接收到所述轉動角度和人臉識別分析結果時，根據所述人臉識別分析結果和所述轉動角度，確定出所述聲源的位置信息，并將所述聲源的位置信息發送給所述聲源的位置信息對應的麥克風陣列；

所述視頻流的控制模塊包括聲源跟蹤攝像機控制模塊，用于將所述備選和有效的麥克風陣列相對聲源的位置信息發送給所述備選和有效的麥克風陣列對應的聲源跟蹤攝像機；

所述音視頻處理模塊用于對采集的音視頻流進行合成。