[發明專利]用于多流多站點遠程呈現會議系統的自動視頻布局

有效

• 申請號: 201611205936.3
• 申請日: 2012-02-09
• 公開（公告）號: CN106878658B
• 公開（公告）日: 2020-03-06
• 發明（設計）人: M.R.達克沃斯;G.帕瑞帕雷;Y.撒利赫;M.馬塞多
• 申請（專利權）人: 寶利通公司
• 主分類號: H04N7/15
• 分類號: H04N7/15
• 代理公司: 中國專利代理(香港)有限公司 72001
• 代理人: 李舒;陳嵐

視頻會議多點控制單元（MCU）自動生成視頻會議端點的顯示布局。基于與從端點接收到的視頻流相關聯的屬性，生成顯示布局，并顯示端點的配置信息。端點可在每一傳出流中包括一個或多個屬性?？梢曰谝曨l流的角色，內容，攝像機源等等，來指定屬性。如果一個或多個屬性發生變化，則可以重新生成顯示布局?；旌掀骺梢曰陲@示布局來生成要在端點處顯示的視頻流。

本申請是申請日為2012年2月9日、申請號為201210027888.9、發明名稱為“用于多流多站點遠程呈現會議系統的自動視頻布局”的發明專利申請的分案申請。

技術領域

本發明一般而言涉及視頻會議系統，更具體而言，涉及多流、多站點會議系統。

背景技術

視頻會議需要在至少兩個參與者之間交換音頻、視頻，及其他信息。一般而言，每一參與者位置處的視頻會議端點將包括用于捕捉本地參與者的圖像的攝像機以及用于顯示遠程參與者的圖像的顯示設備。視頻會議端點也可以包括額外的用于顯示數字內容的顯示設備。在兩個以上的端點參與視頻會議會話的情況下，可以使用多點控制單元（MCU）作為會議控制實體。MCU和端點通常通過通信網絡進行通信，MCU從端點接收并向端點傳輸視頻、音頻，以及數據信道。

遠程呈現技術向參與者提供增強的視頻會議體驗，以便近端參與者感覺好象他們與遠端參與者在同一個房間。可以提供用于各種會議系統的遠程呈現視頻會議，從兩個人的點對點視頻會議系統到多參與者多點視頻會議系統。通常，遠程呈現使用多個攝像機來捕捉近端參與者的圖像，并使用多個顯示器來顯示遠端參與者的圖像。多個視頻流被從多個端點傳輸到MCU以合并到一個或多個經組合的視頻流，這些視頻流被發回端點以顯示在多個顯示設備上。例如，在涉及三個端點的遠程呈現系統中，每一端點都具有三個攝像機，MCU將接收九個視頻流。MCU必須將九個接收到的視頻流組合為一個或多個經組合的視頻流，這些經組合的視頻流被發回以顯示在每一端點上的顯示設備上。這九個視頻流必須基于每一端點上的顯示器的數量和類型，為每一個端點展示。此外，雖然MCU可以從端點接收當前發言者位于該端點上的信息，從每一端點接收到一個以上的視頻流，但是，MCU可能不能確定多個視頻流中的哪一個包括當前發言者。如此，動態地選擇從端點接收到的許多視頻流中的一個來突出顯示可能是困難的。

傳統上，對于多點和多流視頻會議系統，被發送到每一端點的視頻流的排列是手動執行的。例如，視頻網絡操作中心（也稱為VNOC），提供對遠程呈現視頻會議的手動管理，包括適當地將傳入的視頻流布置為經組合的傳出視頻流。在VNOC處管理視頻會議的人員監測當前發言者的視頻流，然后，手動排列布局，以便具有當前發言者的視頻流突出地顯示在每一端點上的顯示屏幕上。突出地顯示當前發言者的圖像可以涉及操縱被顯示的視頻流的比例和大小。再者，管理視頻會議的人員也將手動執行縮放過程。然而，對VNOC的手動管理會受到人為錯誤和延遲的危害。另外，使用操作員以及提供對于操作設備的必需的專業訓練是非常昂貴的。

概括地說，傳統方法被視頻流的靜態布局排列（或者如果需要動態布局排列，使用易于出錯的手動控制的必要性）危害。

發明內容

公開了自動生成視頻流的布局以向視頻會議端點呈現的連續的呈現、遠程呈現、視頻會議MCU。視頻會議端點可包括耦合到處理器的兩個或更多攝像機，至少一個顯示設備。處理器可包括用于編碼供傳輸的視頻和音頻流和解碼接收到的視頻和音頻流的編解碼器。處理器也可以包括用于將屬性指定到傳出流的流屬性模塊。端點也可以包括用于從多個參與者中確定當前發言者的位置的發言者定位器。然后，處理器可以確定捕捉當前發言者的攝像機。隨后，處理器可以指示屬性模塊將屬性添加到由該攝像機所生成的視頻流中，該屬性當由MCU或另一個端點檢查時可以指出相關聯的視頻流包括當前發言者的圖像。