[發明專利]一種在獨立視頻流中插入相關媒體的方法

無效

• 申請號: 201010197497.2
• 申請日: 2010-06-10
• 公開（公告）號: CN101883270A
• 公開（公告）日: 2010-11-10
• 發明（設計）人: 高軍;劉廣鐘;楊國東
• 申請（專利權）人: 上海海事大學
• 主分類號: H04N7/24
• 分類號: H04N7/24;H04N7/26;H04L29/06
• 代理公司: 上海天翔知識產權代理有限公司 31224
• 代理人: 黃冠華

技術領域

本發明涉及計算機網絡視頻，尤其處理多路視頻流的遠程實時傳輸技術。

背景技術

隨著網絡技術的發展，遠程教學迅速發展成為人們獲取教育一種重要方式。遠程教學可以實時將教師現場授課場景以視頻流的形式傳輸到上課者面前，也可以將視頻流壓縮成多媒體文件分發給上課者，這是一種非實時視頻。而目前這種視頻授課并不能保持現場授課的那種生動性。在目前的視頻授課中，大多是在授課老師和授課的講稿之間切換鏡頭，而不能把授課老師的本身形體動作和授課講稿的內容同時展現給聽課者，因此也就失去了一定的現場授課的生動性。然而，傳統的實時視頻流一般是一路視頻流與多路音頻的混合傳輸，這種并不適合在遠程授課中同時傳輸多路視頻流的需求。

為了更生動地展現實時授課場景，需要在一路主媒體流播放的同時，展現其他幾路從屬的媒體流。從屬的媒體流是對主媒體流的補充和注釋，也就是為實時場景增加多個鏡頭，對多個鏡頭分別編碼；在接收端用多個畫面展示從屬的媒體流，給人以生動的場景。從屬的媒體流可以是壓縮過的圖片或者文字等信息。

專利《一種模擬真實課堂授課效果的遠程授課視頻制作方法》，展示了一種模擬真實課堂授課效果的遠程授課視頻的制作方法，將教師的上課過程，分解為黑板上的板書和教師講課兩個過程，分別制成黑板視頻和講課視頻，使得這兩路視頻完全同步，模擬真實課堂的授課效果。這種方法有一定的局限性，它只能處理兩路視頻流，而不能處理更多的視頻流。

專利《在網絡直播緩沖過程中播放廣告的方法、系統及客戶端》，公開了一種在網絡直播緩沖過程中播放廣告的方法、系統及客戶端，但它處理的對象并不針對遠程視頻授課的應用，而是主要考慮網絡視頻的流暢性。

因此，目前單路視頻流的遠程視頻授課形式已經滿足不了當今對實時場景更好的效果的需求，針對多路視頻流的實時視頻傳輸技術有待開發。

發明內容

本發明的目的為了模擬真實課堂的授課效果，滿足當今對實時場景更好的效果的需求，向視頻流中插入用戶定制的多媒體信息，實現對視頻流中的注解、說明、補充等，當應用在遠程視頻授課中，可以將授課實時場景以多個視頻畫面展示，提供更加生動的視頻。視頻流與用戶定制的多媒體信息相結合，盡可能使用戶定制的多媒體信息全方位展現視頻表達的場景，使這些多媒體信息表達更多的細節，以多畫面形式向用戶呈現視頻流。即本發明可以對于多于一路的視頻流或者圖片流進行編碼和傳輸，針對多路視頻流的實時視頻傳輸技術。

本發明的技術方案包括：

一種在原始視頻流中插入用戶定制的多媒體信息的方法，包括以下步驟：

1、采集主要視頻流，以及要與主要視頻流協同的從屬視頻流，包括文體、圖片或其他的視頻流，并指定這些多媒體信息的插入到原始視頻流中的時間戳。

2、對主要的視頻流利用一種編碼器進行編碼，將從屬的視頻流利用可選的編碼器進行單獨編碼。在編碼時用戶定制的多媒體信息將被編碼成一些特殊幀，與普通的視頻幀經過時間戳對比后，按照一定的時序重新安排幀的位置。

3、在接收端，對收到的視頻流進行解碼，要特別考慮用戶的特殊幀的解碼。若該特殊幀包含的是文本等字幕數據，則根據需要將文本顯示在原始視頻流的合適位置上；若該特殊幀包含的是圖片或從屬視頻流，則在一個新畫面中展示這些內容。

有益效果

本發明提供的在視頻流中插入相關多媒體的方法能夠在視頻流中方便插入用戶的定制多媒體信息，使視頻的展示功能得到擴展，在接收端通過多個畫面展示場景，或者對細節進行補充，給接收用戶以更多的信息、更生動的場景。

附圖說明

下面結合附圖與實施案例進一步說明本發明。

圖1編碼過程示意圖；

圖2二路視頻流解碼示意圖；

圖3整系統編碼結構圖；

圖4整體效果圖。

具體實施方式

下面將以遠程視頻授課的案例說明本發明的應用實施步驟及其優點。

在視頻授課時，視頻流可以有二個鏡頭：一個對準授課者，一個對準講稿。授課者的動作作為主要的視頻流，我們稱其為主媒體；而講稿以圖片形式作為多媒體信息插入到主要的視頻流中進行傳輸，我們稱其為從屬流。在下面的說明中，以一路從屬流為例，說明實施步驟：

將從屬流編碼為主流中的特殊幀。在一般的視頻流中，有三類幀：I幀、P幀和B幀。我們可以自定義一種新的類型幀：U幀，代表用戶多媒體幀。這樣，可以將從屬流也做為幀進行編碼，可以采用現有的幀編碼技術對從屬流進行處理，但U幀與I、P以及B幀沒有關系，每一個U幀都進行幀內編碼，而且不為其他幀的參考幀。在編碼端的過程如圖1所示。