[發明專利]用于低延遲和分布式會議應用的會議服務器架構的系統和方法

有效

• 申請號: 200680034116.0
• 申請日: 2006-07-21
• 公開（公告）號: CN101502109A
• 公開（公告）日: 2009-08-05
• 發明（設計）人: R·希萬拉;A·埃爾法澤阿迪斯;O·莎彼洛
• 申請（專利權）人: 維德約股份有限公司
• 主分類號: H04N7/15
• 分類號: H04N7/15
• 代理公司: 上海專利商標事務所有限公司
• 代理人: 陳 煒

相關申請的交叉引用

本申請要求2005年7月20日提交的美國臨時專利申請S/N.60/701,108 和60/701,109、2005年9月7日提交的美國臨時專利申請S/N.60/714,741和 60/714,600、以及2005年10月4日提交的美國臨時專利申請S/N.60/723,347 和60/723,348的優先權。此外，本申請涉及共同提交的美國專利申請S/N. 60/701,108、60/723,392[視頻編碼]、60/701,111、60/714,600、60/723,347[信息通路(trunk)]和60/701,110[抖動(jitter)]。所有前述優先權和相關申請通過 全文引用而結合于此。

發明領域

本發明涉及多媒體和電信技術。具體地，本發明涉及多方會議應用的音頻 和視頻數據的通信和分發。更具體地，本發明涉及采用可縮放的視頻和音頻編 碼技術的會議系統和方法的實現。

發明背景

當今，計算機網絡(例如，因特網)已替代了傳統的分發系統(例如，電 子郵件和電話)對媒體和信息的傳送。多媒體和電信技術的最新進展涉及將視 頻和音頻通信及會議的能力與諸如IP?PBX、即時信息收發、web會議的網際協 議(“IP”)通信系統進行集成。為了有效地將視頻通信集成到這些系統中， 這些系統通常必須支持點對點和多點通信。在這些應用中所采用的多點服務器 (也稱為會議橋分器(conference?bridge)、多點會議單元、或“MCU”)必 須對來自多方會議的多個參與方的媒體流進行混合，并且將它們分發給所有會 議參與方。較佳地，MCU還應當提供包括以下的選項：(1)連續出席(例如， 因此可同時看到多個參與方)；(2)視圖或布局個性化(例如，因此每個參 與方可選擇他或她自己的關于其他參與方的視圖-其他參與方的一部分可以 采用較大的格式來觀看，而一部分以較小的格式來觀看)；(3)差錯定位(例 如，當傳輸中出現差錯時，在該參與方與服務器之間解決該差錯)；(4)隨 機進入(例如，進入會議的新參與方對其他參與方沒有影響或有最小影響)； 以及(5)速率匹配(例如，因此每個參與方可經由帶寬不同的不同網絡而連 接，并且可以采用自己的速率從會議橋分器接收數據)。

當前稱為“代碼轉換”MCU的MCU解決方案通過解碼MCU中的所有視 頻流、為每個參與方創建個人布局以及重編碼參與方專用數據流以發送到每個 參與方、考慮例如參與方的可用帶寬等來實現這些有益功能。然而，這種解決 方案向視頻流傳輸添加了顯著延遲、使視頻數據的質量降級，并且開發和部署 很昂貴(這些系統要求復雜、專用的數字信號處理器)。

替代的MCU解決方案是基于所謂的“交換”MCU的。在此解決方案中， 僅將單個所選參與方(即，“活動說話者”)的視頻和/或音頻信號從該MUC 發送給一個或所有其他參與方。活動說話者/參與方可通過對所有參與方的音頻 信號施加語音活動性的定量測量來選擇。雖然對活動說話者的選擇通常在 MCU處執行，但是語音活動指標的計算也可在端點上執行(在發送之前)。 交換MCU涉及較少的DSP處理并且比代碼轉換MUC更簡單，但它們相應地 具有較少的功能(例如，沒有差錯定位、沒有速率匹配、隨機進入功能受限)。

此外，已作出各種嘗試來實現專用于一個視頻標準的、用以組合壓縮域中 的視頻流的方法。基于ITU-T?H.261標準的方法要求端點向會議橋分器發送 H.261?QCIF圖像，隨后該橋分器組合諸如4個QCIF圖像以創建一個CIF圖像。 諸如ITU-T?H.263和H.264的較新的視頻編解碼器允許通過將成分子畫面的每 一個視為該更大畫面的獨立切片來將已編碼畫面組合或“合成”為更大的畫面。 這些和其他類似方法往往只針對視頻壓縮標準并且不支持個人布局(即，所有 參與方被迫以相同分辨率觀看給定參與方)、差錯彈性或速率匹配。它們還在 視頻與音頻之間的正確同步以及抖動緩沖器管理方面向MCU設計者提出新的 挑戰。其他解決方案是基于向所有參與方發送全部數據流；這些解決方案不支 持速率匹配或端點對分辨率的選擇。