[發明專利]一種多場景流媒體課件錄制與直播方法

有效

• 申請號: 201210180799.8
• 申請日: 2012-06-04
• 公開（公告）號: CN102821308A
• 公開（公告）日: 2012-12-12
• 發明（設計）人: 鄭慶華;趙輝;劉均;杜海鵬;張未展;陳小云;陳皙
• 申請（專利權）人: 西安交通大學
• 主分類號: H04N21/2368
• 分類號: H04N21/2368;H04N21/242;H04N21/8547;H04N21/2747;H04N21/4402;H04N5/76
• 代理公司: 西安智大知識產權代理事務所 61215
• 代理人: 弋才富

1.一種多場景流媒體課件錄制與直播方法，其特征在于，

在開始錄制時，通過屏幕視頻關鍵幀補幀算法使錄制的教師攝像頭視頻多媒體文件和屏幕視頻多媒體文件同步；

在流化直播過程中，通過視頻PES包和音頻PES包同步封裝復用，將實時的視頻流和音頻流編碼成TS流文件，分發到Web直播服務器中，通過多視頻源同步直播控制實現同步播放教師攝像頭視頻和屏幕視頻。

2.根據權利要求1所述多場景流媒體課件錄制與直播方法，其特征在于，所述屏幕視頻關鍵幀補幀算法包括如下步驟：

Step1：初始化屏幕視頻幀緩存隊列，錄制教師音頻流、教師攝像頭視頻流和屏幕視頻流的編碼參數，并置補幀標志位為假；

St?ep2：檢測輸入參數的有效性，如果有效，進入下一步，否則，直接結束；

Step3：啟動教師音頻采集線程、教師攝像頭視頻采集線程和屏幕視頻采集線程，分別采集教師音頻數據、教師攝像頭視頻數據和屏幕視頻數據；

Step4：判斷教師音頻數據、教師攝像頭視頻數據和屏幕視頻數據采集是否成功，如果成功，進入下一步，否則，直接結束；

Step5：根據編碼參數對上述三路數據分別編碼，輸出編碼后的教師音頻流、教師攝像頭視頻流和屏幕視頻流；

Step6：判斷補幀標志位，若補幀標志位為真，則將收到的教師攝像頭視頻數據和教師音頻數據組合寫入教師攝像頭視頻媒體文件，將收到的屏幕視頻數據和教師音頻數據組合寫入屏幕視頻媒體文件，并跳轉到Step9；若補幀標志位為假，則進入下一步；

Step7：檢測教師攝像頭視頻流，直到收到教師攝像頭視頻關鍵幀，則開始寫入教師攝像頭視頻媒體文件，并記錄關鍵幀時間戳T；

Step8：將屏幕視頻幀保存在屏幕視頻幀緩存隊列，并檢測是否收到屏幕視頻關鍵幀，若收到，則將該關鍵幀補到屏幕視頻幀緩存隊列頭部，同時修改該關鍵幀的時間戳為T，再將緩存隊列內的數據依次寫入屏幕視頻媒體文件，清空屏幕視頻幀緩存隊列，置補幀標志位為真；

Step9：判斷錄制是否結束，若未結束，則返回執行Step5；否則，直接跳轉到結束。

3.根據權利要求1所述多場景流媒體課件錄制與直播方法，其特征在于，所述視頻PES包和音頻PES包同步封裝復用包括如下步驟：

Step1：初始化視音頻緩存隊列及各個參數，輸入TS媒體文件的切片時長，開始接收視頻PES流和音頻PES流，根據接收的視音頻數據分別計算視頻幀的顯示時間標志和音頻幀的顯示時間標志，其中顯示時間標志是PES包頭中可選字段，用于通知解碼器顯示已解碼的圖像幀的時間戳；

Step2：若音頻幀的顯示時間標志小于等于視頻幀的顯示時間標志，則將音頻幀數據加入音頻幀的緩存隊列，并更新音頻幀顯示時間標志；否則，將視頻幀數據加入視頻幀的緩存隊列，更新視頻幀顯示時間標志；

Step3：檢測音頻幀的緩存隊列是否為空，若不為空，則將隊列中的音頻PES流數據寫入TSi文件之中；檢測視頻幀的緩存隊列是否為空，若不為空，則將隊列中的視頻PES流數據寫入TSi文件之中；

Step4：檢測TSi文件是否寫完，若TSi文件還未寫完，即TSi文件的幀數目小于TS媒體文件切片時長與視頻幀速率之積，則返回Step2，否則，輸出當前的TSi文件，并存儲到服務器之中，上述TSi文件指媒體序列文件中的第i個TS文件；

Step5：服務器更新TS數據索引文件，重置所有參數；

Step6：判斷錄制是否結束，若未結束，則返回執行Step2；否則，直接結束。

4.根據權利要求3所述多場景流媒體課件錄制與直播方法，其特征在于，利用如下公式計算音頻幀的顯示時間標志PTS

PTS=AudioFrmNum*AudioSamp*SequenceSampling]]>

其中，AudioFrmNum是當前音頻幀的在完整碼流的音頻幀中的序號；AudioSamp是音頻幀的樣本點，與采樣率有關；Sequence為時鐘頻率；Sampling為音頻采樣率。