[發(fā)明專利]流媒體數(shù)據(jù)轉(zhuǎn)碼方法、裝置、計(jì)算設(shè)備及可讀存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 202010781992.1
• 申請(qǐng)日: 2020-08-06
• 公開（公告）號(hào): CN111954027B
• 公開（公告）日: 2022-07-08
• 發(fā)明（設(shè)計(jì)）人: 黎明;夏一哂;彭華
• 申請(qǐng)（專利權(quán)）人: 浩聯(lián)時(shí)代（北京）科技有限公司
• 主分類號(hào): H04N21/233
• 分類號(hào): H04N21/233;H04N21/434;H04N21/439;H04N21/4402;H04N21/6437
• 代理公司: 北京思睿峰知識(shí)產(chǎn)權(quán)代理有限公司 11396
• 代理人: 謝建云;趙愛(ài)軍

本發(fā)明公開了一種流媒體數(shù)據(jù)轉(zhuǎn)碼方法，適于在計(jì)算設(shè)備中完成，包括：接收源流媒體數(shù)據(jù)，對(duì)源流媒體數(shù)據(jù)流進(jìn)行解復(fù)用，分解出源音頻數(shù)據(jù)和源視頻數(shù)據(jù)，所述源音頻數(shù)據(jù)為第一音頻編碼格式；對(duì)所述源音頻數(shù)據(jù)進(jìn)行音頻數(shù)據(jù)處理轉(zhuǎn)換成目標(biāo)音頻數(shù)據(jù)，所述目標(biāo)音頻數(shù)據(jù)為第二音頻編碼格式；對(duì)所述源視頻數(shù)據(jù)進(jìn)行視頻數(shù)據(jù)處理獲得目標(biāo)視頻數(shù)據(jù)；將所述目標(biāo)音頻數(shù)據(jù)和目標(biāo)視頻數(shù)據(jù)進(jìn)行復(fù)用，獲得目標(biāo)流媒體數(shù)據(jù)。本發(fā)明一并公開了相應(yīng)的流媒體數(shù)據(jù)轉(zhuǎn)碼裝置、計(jì)算設(shè)備及可讀存儲(chǔ)介質(zhì)。

技術(shù)領(lǐng)域

本發(fā)明涉及音視頻處理領(lǐng)域，尤其涉及一種流媒體數(shù)據(jù)轉(zhuǎn)碼方法、裝置、計(jì)算設(shè)備及可讀存儲(chǔ)介質(zhì)。

背景技術(shù)

為了適應(yīng)業(yè)務(wù)需求或網(wǎng)絡(luò)狀況，很多時(shí)候需要對(duì)源媒體數(shù)據(jù)的編碼方式進(jìn)行改變，比如，隨著互聯(lián)網(wǎng)技術(shù)的發(fā)展，視頻直播、視頻會(huì)議等應(yīng)用越來(lái)越廣泛，而網(wǎng)頁(yè)實(shí)時(shí)通信(Web Real Time Communication，WebRTC)技術(shù)能夠給用戶提供網(wǎng)頁(yè)支持的實(shí)時(shí)語(yǔ)音通話和視頻通話，但在WebRTC被廣泛應(yīng)用到視頻應(yīng)用前，如何將WebRTC運(yùn)用到已有的音視頻系統(tǒng)中，將非webRTC數(shù)據(jù)轉(zhuǎn)換成WebRTC數(shù)據(jù)，成為必須要解決的技術(shù)問(wèn)題。通常這兩種系統(tǒng)中，音頻編碼格式和視頻編碼格式存在差異，在WebRTC中，常用的音頻編碼格式時(shí)OPUS編碼格式，而非WebRTC中多采用AAC音頻編碼格式，對(duì)于音頻編碼格式的轉(zhuǎn)換，目前比較常用的是FFMPEG，但是這一音頻轉(zhuǎn)碼技術(shù)在轉(zhuǎn)碼時(shí)并沒(méi)有考慮編碼格式的幀長(zhǎng)度對(duì)轉(zhuǎn)碼的影響，盡管它提供了豐富的單獨(dú)幀之間的轉(zhuǎn)換函數(shù)，實(shí)際應(yīng)用中音頻流的數(shù)據(jù)轉(zhuǎn)換還需在FFPEMG基礎(chǔ)上做額外的處理。

另外，對(duì)于視頻數(shù)據(jù)，盡管兩個(gè)系統(tǒng)中視頻編碼都采用H264編碼格式，但是對(duì)于視頻流的處理也不盡相同，在WebRTC中，連續(xù)的I幀、SPS幀、PPS幀作為起始幀的判斷標(biāo)準(zhǔn)，而非webRTC中，在SPS幀和PPS幀不變的情況下，獨(dú)立的I幀就可以作為起始幀的標(biāo)志，而在有些情況下，為了適應(yīng)糟糕的網(wǎng)絡(luò)狀況需要丟棄一些數(shù)據(jù)幀，起始幀是不能丟棄的，需要能夠確切的識(shí)別出起始幀，才能進(jìn)行丟棄操作，否則有可能將起始幀丟棄，導(dǎo)致整個(gè)流媒體數(shù)據(jù)受損。因此，如何同步不同系統(tǒng)間對(duì)起始幀的處理，成為實(shí)際應(yīng)用急需解決的問(wèn)題。

發(fā)明內(nèi)容

為此，本發(fā)明提供了一種流媒體數(shù)據(jù)轉(zhuǎn)碼方法、裝置、計(jì)算設(shè)備和可讀存儲(chǔ)介質(zhì)，以力圖解決或者至少緩解上面存在的問(wèn)題。

根據(jù)本發(fā)明的一個(gè)方面，提供一種流媒體數(shù)據(jù)轉(zhuǎn)碼方法，適于在計(jì)算設(shè)備中完成，方法包括：接收源流媒體數(shù)據(jù)，對(duì)源流媒體數(shù)據(jù)流進(jìn)行解復(fù)用，分解出源音頻數(shù)據(jù)和源視頻數(shù)據(jù)，源音頻數(shù)據(jù)為第一音頻編碼格式；對(duì)源音頻數(shù)據(jù)進(jìn)行音頻數(shù)據(jù)處理轉(zhuǎn)換成目標(biāo)音頻數(shù)據(jù)，目標(biāo)音頻數(shù)據(jù)為第二音頻編碼格式；對(duì)源視頻數(shù)據(jù)進(jìn)行視頻數(shù)據(jù)處理獲得目標(biāo)視頻數(shù)據(jù)；將目標(biāo)音頻數(shù)據(jù)和目標(biāo)視頻數(shù)據(jù)進(jìn)行復(fù)用，獲得目標(biāo)流媒體數(shù)據(jù)。

可選的，在根據(jù)本發(fā)明的流媒體數(shù)據(jù)轉(zhuǎn)碼方法中，源流媒體數(shù)據(jù)為實(shí)時(shí)傳輸協(xié)議數(shù)據(jù)包，實(shí)時(shí)傳輸協(xié)議數(shù)據(jù)包報(bào)頭中包含同步源標(biāo)識(shí)符，對(duì)源流媒體數(shù)據(jù)流進(jìn)行解復(fù)用，分解出源音頻數(shù)據(jù)和源視頻數(shù)據(jù)包括：根據(jù)實(shí)時(shí)傳輸協(xié)議數(shù)據(jù)包報(bào)頭中的同步源標(biāo)識(shí)符從源流媒體數(shù)據(jù)中分解出源音頻數(shù)據(jù)和源視頻數(shù)據(jù)。

可選的，在根據(jù)本發(fā)明的流媒體數(shù)據(jù)轉(zhuǎn)碼方法中，第二音頻編碼格式的音頻幀的幀長(zhǎng)度為第二音頻幀長(zhǎng)度，對(duì)源音頻數(shù)據(jù)進(jìn)行音頻數(shù)據(jù)處理轉(zhuǎn)換成目標(biāo)音頻數(shù)據(jù)包括：解析第一音頻編碼格式的源音頻數(shù)據(jù)包，獲取源音頻數(shù)據(jù)包中的第一音頻幀；將第一音頻幀中的采樣點(diǎn)數(shù)據(jù)根據(jù)第二音頻幀長(zhǎng)度封裝成第二音頻編碼格式的音頻幀；將第二音頻編碼格式的音頻幀封裝成目標(biāo)音頻數(shù)據(jù)包，并設(shè)定目標(biāo)音頻數(shù)據(jù)包的時(shí)間戳，相鄰的第二音頻編碼格式的音頻幀之間的時(shí)間戳增量為相鄰的第二音頻編碼格式的幀間的時(shí)間間距。

可選的，在根據(jù)本發(fā)明的流媒體數(shù)據(jù)轉(zhuǎn)碼方法中，將第一音頻幀中的采樣點(diǎn)數(shù)據(jù)根據(jù)第二音頻幀長(zhǎng)度封裝成第二音頻編碼格式的音頻幀包括：獲取第一音頻編碼格式的音頻幀中的采樣點(diǎn)數(shù)據(jù)；從采樣點(diǎn)數(shù)據(jù)中獲取第二音頻幀長(zhǎng)度的采樣點(diǎn)數(shù)據(jù)封裝成第二音頻編碼格式的音頻幀。