[發(fā)明專利]視頻幀和時間碼綁定方法、視頻文件錄制方法和編碼器

有效

• 申請?zhí)枺?/td>: 202110107160.6
• 申請日: 2021-01-27
• 公開（公告）號: CN112437240B
• 公開（公告）日: 2021-04-09
• 發(fā)明（設(shè)計）人: 李浩;劉洋
• 申請（專利權(quán)）人: 南京美樂威電子科技有限公司
• 主分類號: H04N5/91
• 分類號: H04N5/91;H04N5/92
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發(fā)明公開了一種視頻幀和時間碼綁定方法以及相應(yīng)的視頻文件錄制方法和編碼器，解決了現(xiàn)有技術(shù)中因視頻源分兩路發(fā)送視頻幀和時間碼而容易導(dǎo)致與其連接的編碼器視頻幀和時間碼錯位等問題，將視頻幀和時間碼進行綁定存儲，使的編碼器所形成的視頻文件盡量與現(xiàn)場攝像機所采集的畫面一致，降低了后期視頻素材的編輯、剪輯等處理難度，提高了處理效率和節(jié)目制作效果。

技術(shù)領(lǐng)域

本發(fā)明涉及視頻處理技術(shù)領(lǐng)域，尤其涉及一種視頻幀和時間碼綁定方法以及相應(yīng)的視頻文件錄制方法和編碼器。

背景技術(shù)

為了豐富畫面，提高節(jié)目的可看性、娛樂性，往往采用多機位拍攝，攝像機或數(shù)碼相機將所拍攝的畫面進行存儲，形成供后期編輯使用的節(jié)目素材。在節(jié)目的后期編輯中，來自同一場景多個機位的素材，需要在不同的視頻軌上保持原始的相對時間關(guān)系。

如圖1所示，以攝像機為例，在節(jié)目制作過程中，位于錄制現(xiàn)場的攝像機采集拍攝現(xiàn)場的畫面，發(fā)送至編碼器，編碼器將經(jīng)過壓縮、編碼處理后生成可處理的視頻文件發(fā)送至監(jiān)控中心，監(jiān)控中心根據(jù)編碼器傳輸過來的視頻文件進行處理，相應(yīng)的處理操作將被應(yīng)用于各攝像機所拍攝的現(xiàn)場畫面。

時間碼（Time Code，TC）是攝像機在記錄圖像信號的時候，針對每一幀圖像記錄的時間編碼，是一種應(yīng)用于流的數(shù)字信號。該信號為視頻中的每個幀都分配一個數(shù)字，用以表示小時、分鐘、秒鐘和幀數(shù)。

為了更好地還原在實際拍攝中的場景，需要一定的同步技術(shù)，多臺攝像機在現(xiàn)場進行視頻信號采集時，會同時采集同步發(fā)生器所生成的時間碼，以盡量保證各機位的時間碼能夠同步。

然而攝像機向編碼器發(fā)送數(shù)據(jù)時，并未對視頻幀和時間碼進行綁定，而是分兩路獨立發(fā)送。現(xiàn)有技術(shù)中，編碼器錄制MP4、MOV文件只記錄音/視頻數(shù)據(jù)，未記錄視頻幀的時間碼信息；亦或是編碼器所采集的兩路數(shù)據(jù)出現(xiàn)時間錯位而導(dǎo)致其記錄的時間碼信息不能與視頻幀的真實時間保持一一對應(yīng)關(guān)系，進而導(dǎo)致監(jiān)控中心以時間碼索引視頻幀時可能會出現(xiàn)漏幀、錯幀、錄制關(guān)鍵幀記錄錯誤的現(xiàn)象，導(dǎo)致監(jiān)控中心根據(jù)編碼器存儲的視頻信號所形成的編輯、剪輯等操作指令最終對攝像機所拍攝的現(xiàn)場畫面無法有效執(zhí)行。對于多機位拍攝場景，因為視頻幀和時間碼的綁定錯誤會進一步增加后期的編輯處理難度，影響處理效果。

發(fā)明內(nèi)容

有鑒于此，為了解決現(xiàn)有技術(shù)中因視頻幀與時間碼未進行有效綁定而影響節(jié)目錄制效果的問題，本發(fā)明提供一種視頻幀和時間碼綁定方法以及相應(yīng)的視頻文件錄制方法和編碼器，將視頻幀與其對應(yīng)的時間碼綁定存儲，便于后期對視頻文件的編輯處理。

為了解決上述問題，本發(fā)明提供一種視頻幀和時間碼綁定方法，所述視頻幀和所述時間碼來源于視頻源，該方法包括以下步驟：

將所述視頻幀按照采集時間順序進行存儲，得到視頻幀隊列；將所述時間碼按照采集時間順序進行存儲，得到時間碼隊列；

對于所述視頻幀隊列中的每一視頻幀，根據(jù)采集時間對所述視頻幀標記第一時間戳，得到所述視頻幀隊列對應(yīng)的第一時間戳隊列；對于所述時間碼隊列的每一時間碼，根據(jù)采集時間對所述時間碼標記第二時間戳，得到所述時間碼隊列對應(yīng)的第二時間戳隊列；

對于所述視頻幀隊列中的每一視頻幀，按照查找規(guī)則在所述第二時間戳隊列中查找與標記所述視頻幀的第一時間戳對應(yīng)的第二時間戳，將所述視頻幀與所查找的第二時間戳所標記的時間碼綁定存儲。

其中，所述查找規(guī)則為：對于所述視頻幀隊列中的每一視頻幀，利用標記所述視頻幀的第一時間戳以及所述視頻幀隊列的幀間隔確定查找區(qū)間，在所述第二時間戳隊列中，查找位于所述查找區(qū)間內(nèi)的第二時間戳作為與所述第一時間戳對應(yīng)的第二時間戳。

進一步，所述查找規(guī)則還包括：

若所述查找區(qū)間內(nèi)存在兩個第二時間戳，則選擇與所述第一時間戳?xí)r間間距最小的第二時間戳作為與所述第一時間戳對應(yīng)的第二時間戳。