[發明專利]一種基于同步音頻提取和實時傳輸的無線影音系統

有效

• 申請號: 201310220760.9
• 申請日: 2013-06-05
• 公開（公告）號: CN103268763A
• 公開（公告）日: 2013-08-28
• 發明（設計）人: 徐永鍵;劉沛釗;譚洪舟;張華康;朱偉鴻;林澍霖;阮俊杰
• 申請（專利權）人: 廣州市花都區中山大學國光電子與通信研究院
• 主分類號: G10H1/36
• 分類號: G10H1/36;H04W84/12
• 代理公司: 廣州粵高專利商標代理有限公司 44102
• 代理人: 林麗明

技術領域

本發明涉及一種無線影音系統，更具體地，涉及一種基于同步音頻提取和實時傳輸的無線影音系統。

背景技術

隨著計算機技術、嵌入式技術以及網絡通信等關鍵技術的飛速發展，移動終端已經成為人們生活中的必需品，各行各路應用軟件開發者紛紛地打造出了自己的移動應用客戶端，在多媒體影音娛樂方面也不例外。多媒體影音娛樂是人們在緊張的學習和工作之余放松心情、娛樂身心的主要方式之一，在移動互聯網時代，人們對于移動智能終端的多媒體影音娛樂功能也有了更多的期待和更高的要求。

在中國多媒體影音娛樂市場，“卡拉OK”是最受大眾歡迎的娛樂休閑方式之一。參與者事先將由歌曲原唱音軌、伴唱音軌、歌詞以及伴奏視頻畫面等信息組成的音視頻媒質（例如MKV格式的視頻文件）保存到某種存儲介質上，然后通過相應的播放設備將該媒質播放到顯示設備上，然后參與者就可以一邊看著歌詞和伴奏視頻畫面，一邊拿著麥克風在音樂的伴奏下演唱自己的歌曲。這種獨特的影音娛樂方式在生活節奏越來越快的現代人群中非常的受歡迎。雖然“卡拉OK”如此的流行，但是傳統的“卡拉OK”娛樂方式卻有著諸多的弊端：設備昂貴；設備體積過大，不方便移動；演唱距離受到顯示設備的限制。如何實現一種相對廉價、便利、高音質而且又有個性化功能的無線影音系統成為許多歌唱愛好者迫切的需求。

發明內容

本發明為克服上述現有技術所述的多媒體影音娛樂的不足，提出一種基于同步音頻提取和實時傳輸的無線影音系統。該無線影音系統可擺脫傳統“卡拉OK”的有線連接的不便、演唱距離的束縛、音質和個性化體驗不足的局限。

為解決上述技術問題，本發明的技術方案如下：

一種基于同步音頻提取和實時傳輸的無線影音系統，無線影音系統包括客戶端和服務端，所述客戶端和服務端通過Wi-Fi無線網絡連接，

所述客戶端在播放視頻畫面時同步提取視頻音軌解碼后的音頻PCM數據并將其轉換成服務端支持的格式，通過Wi-Fi無線網絡實時地將音頻PCM數據發送到服務端；

服務端對接收到的音頻PCM數據進行實時的音效處理和播放，并同步地通過麥克風來錄制用戶演唱的音頻數據，經過音效處理的播放音頻和同步錄制的音頻經過DSP混音后，由服務端進行讀取并通過Wi-Fi網絡實時地回傳給客戶端，并由客戶端來進行后續的音頻編碼和音視頻文件合并處理。

客戶端對媒體文件中的音視頻軌進行解碼以及后處理，并將同步提取到的PCM音頻數據通過Wi-Fi網絡實時地發送到服務端；服務端通過Wi-Fi網絡實時地接收客戶端傳送過來的音頻數據，并對其進行音效的處理和播放；而且在音頻處理和播放的同時，服務端可以通過演唱輸入設備進行用戶演唱聲音的同步錄制，錄制到的音頻數據和正在播放的音頻數據由DSP音頻處理模塊進行混音，混音后的數據由服務程序讀取并通過Wi-Fi網絡實時地回傳到客戶端；客戶端接收到服務端回傳來的音頻數據后，將此音頻數據進行編碼，然后和用戶指定的視頻文件進行合并，從而生成一個由用戶主唱的MV視頻文件。

更進一步的，所述客戶端包括解復用模塊、音頻解碼模塊、視頻解碼模塊、音頻濾波模塊、視頻濾波模塊、同步信號提取模塊和音頻信號發送模塊；

所述解復用模塊用于對媒體文件中的媒體源進行音視頻軌分離；

所述音頻解碼模塊用于對音頻進行解碼；

所述視頻解碼模塊用于對視頻進行解碼；

所述音頻濾波模塊用于將解碼后的音頻格式轉換為服務端支持的格式；

所述視頻濾波模塊用于將解碼后的視頻格式轉換為服務端支持的格式；

所述同步信號提取模塊用于提取同步音頻信號；

所述音頻信號發送模塊用于將同步音頻信號發送；

所述服務端包括音頻接收模塊、音頻處理模塊、同步錄音模塊和混音模塊；

所述音頻接收模塊用于接收客戶端發送過來的音頻數據；

所述音頻處理模塊用于對所接收的音頻數據進行音效處理和播放；

所述同步錄音模塊用于同步錄制用戶演唱的音頻數據；

所述混音模塊用于將播放的音頻數據和同步錄制的音頻數據進行音效混合。

更進一步的，所述客戶端為運行在移動終端上的影音播放器，所述移動終端為智能手機或者平板電腦。