[實用新型]一種基于視覺與聲音融合的可交互的會議裝置

有效

• 申請號: 202020079320.1
• 申請日: 2020-01-15
• 公開（公告）號: CN213213667U
• 公開（公告）日: 2021-05-14
• 發明（設計）人: 朱雷震;徐東升;周國輝
• 申請（專利權）人: 上海莊生曉夢信息科技有限公司
• 主分類號: H04N7/15
• 分類號: H04N7/15;H04R1/08;H04R1/02
• 代理公司: 上海互順專利代理事務所(普通合伙) 31332
• 代理人: 韋志剛

本實用新型公開一種基于視覺與聲音融合的可交互的會議裝置，包括音箱；本實用新型通過麥克風陣列采集多路音頻定位講話人方位角，對應角度映射到全景畫面檢測人臉規避噪聲干擾，切換畫面，精確呈現主講人，預覽會議環境全場景，進而實現語音視頻交互的會議裝置，通過魚眼鏡頭采集360度視頻，從而捕獲在場的所有會議參與者，通過麥克風陣列采集360度多通道音頻，從而更好地去除噪聲，回聲消除，在多端會議進行交互時互不干擾，精確計算獲取會議參與者發言人的位置通過高效的圖像投影變換，聲源定位，人臉檢測算法，實時定位演講人保證圖像切換無延遲，無需云臺，一定程度上提升了會議效果和會議質量。

技術領域

本實用新型涉及視頻會議裝置技術領域，尤其涉及一種基于視覺與聲音融合的可交互的會議裝置。

背景技術

信息時代的今天，人們對快速的信息溝通的要求越來越高，從政府機構的會議中心、指揮中心、監控中心、審判法庭到教育科研環境的多媒體教室、培訓中心、學術報告廳，商務環境的行政會議室，星級酒店的多功能廳以至大型的國際會議中心，進行會議時用到的云臺視頻會議裝置得到廣泛應用，而隨著科技的不斷發展，為了保障會議的質量，人們對云臺視頻會議裝置的功能要求也越來越多；

傳統的純語音會議裝置使會議過程不夠直觀，而現有的云臺視頻會議裝置大都功能單一，基于云臺轉動切換視頻畫面有延時，導致畫面傳遞效果不佳，且裝置的視頻視角范圍有限，無法預覽整個會議場景，另外現有的會議裝置無法精確突出主講人，從而影響會議質量，因此，本實用新型提出一種基于視覺與聲音融合的可交互的會議裝置用以解決現有技術中存在的問題。

實用新型內容

針對上述問題，本實用新型的目的在于提出一種基于視覺與聲音融合的可交互的會議裝置，該基于視覺與聲音融合的可交互的會議裝置通過自研的高效的圖像投影變換，聲源定位，人臉檢測算法，實時定位演講人保證圖像切換無延遲，無需云臺，通過麥克風陣列采集多路音頻定位講話人方位角，對應角度映射到全景畫面檢測人臉規避噪聲干擾，切換畫面，精確呈現主講人，預覽會議環境全場景，進而實現語音和視頻交互。

為了實現本實用新型的目的，本實用新型通過以下技術方案實現：一種基于視覺與聲音融合的可交互的會議裝置，包括音箱，所述音箱上設有電路板、支撐板、中空板和魚眼鏡頭，所述電路板上設有USB 接口，所述電路板的中間位置設有主控芯片，所述支撐板的下表面設有音頻處理芯片，所述支撐板的上表面設有角度傳感器和鏡頭底座，所述中空板的上表面設有麥克風，所述中空板上開設有圓孔，所述支撐板通過支撐柱安裝于電路板上。

進一步改進在于：所述USB接口為USB3.0高速接口，所述USB 接口安裝于電路板側邊的中間位置。

進一步改進在于：所述鏡頭底座設于支撐板的中心位置，所述魚眼鏡頭為220度魚眼鏡頭，所述魚眼鏡頭設于鏡頭底座的中心位置。

進一步改進在于：所述麥克風安裝于中空板上表面的邊緣位置，所述麥克風至少設有四組，所述麥克風呈等距陣列分布。

進一步改進在于：所述音頻處理芯片的輸入端與麥克風的輸出端電性連接，所述音頻處理芯片的輸出端與主控芯片的輸入端電性連接。

進一步改進在于：所述魚眼鏡頭的輸出端與角度傳感器的輸入端電性連接，所述角度傳感器的輸出端與主控芯片的輸入端電性連。

本實用新型的有益效果為：本實用新型包括音箱，通過麥克風陣列采集多路音頻定位講話人方位角，對應角度映射到全景畫面檢測人臉規避噪聲干擾，切換畫面，精確呈現主講人，預覽會議環境全場景，進而實現語音視頻交互的會議裝置，通過魚眼鏡頭采集360度視頻，從而捕獲在場的所有會議參與者，通過麥克風陣列采集360度多通道音頻，從而更好地去除噪聲，回聲消除，在多端會議進行交互時互不干擾，精確計算獲取會議參與者發言人的位置通過高效的圖像投影變換，聲源定位，人臉檢測算法，實時定位演講人保證圖像切換無延遲，無需云臺，一定程度上提升了會議效果和會議質量。

附圖說明