[發(fā)明專利]視頻數(shù)據(jù)處理方法和裝置、終端、攝像頭及視頻會(huì)議系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010549862.5
• 申請(qǐng)日: 2020-06-16
• 公開(kāi)（公告）號(hào): CN111641804A
• 公開(kāi)（公告）日: 2020-09-08
• 發(fā)明（設(shè)計(jì)）人: 李春
• 申請(qǐng)（專利權(quán)）人: 廣州邁聆信息科技有限公司
• 主分類號(hào): H04N7/15
• 分類號(hào): H04N7/15;H04N19/146;H04N5/232
• 代理公司: 北京市立方律師事務(wù)所 11330
• 代理人: 劉延喜

本申請(qǐng)?zhí)峁┮环N視頻數(shù)據(jù)處理方法和裝置、終端、攝像頭、視頻會(huì)議系統(tǒng)及計(jì)算機(jī)存儲(chǔ)介質(zhì)，所述方法包括：從攝像頭采集編碼視頻流；其中，所述編碼視頻流為所述攝像頭對(duì)拍攝的圖像數(shù)據(jù)進(jìn)行編碼得到的碼流；基于虛擬編碼器對(duì)所述編碼視頻流的編碼參數(shù)進(jìn)行檢測(cè)，并根據(jù)所述編碼參數(shù)反饋至所述攝像頭，以使得所述攝像頭對(duì)編碼過(guò)程進(jìn)行控制；將所述編碼視頻流以透?jìng)鞣绞絺鬏斨两邮斩恕Ｔ摷夹g(shù)方案，減少了攝像頭將圖像數(shù)據(jù)傳輸至終端設(shè)備的帶寬需求，同時(shí)降低了對(duì)終端設(shè)備的硬件性能要求，使得一些低性能的終端設(shè)備都可以支持高清視頻數(shù)據(jù)處理，促進(jìn)了視頻會(huì)議技術(shù)推廣應(yīng)用。

技術(shù)領(lǐng)域

本申請(qǐng)涉及互聯(lián)網(wǎng)技術(shù)領(lǐng)域，具體而言，本申請(qǐng)涉及一種視頻數(shù)據(jù)處理方法和裝置、終端、攝像頭、視頻會(huì)議系統(tǒng)及計(jì)算機(jī)存儲(chǔ)介質(zhì)。

背景技術(shù)

隨著互聯(lián)網(wǎng)技術(shù)發(fā)展，視頻會(huì)議系統(tǒng)技術(shù)在商務(wù)和社交場(chǎng)景中都得到了廣泛應(yīng)用，以常用視頻會(huì)議系統(tǒng)為例，一般情況下都是通過(guò)終端設(shè)備(如平板電視一體機(jī))結(jié)合攝像頭的形式構(gòu)成，通過(guò)攝像頭采集圖像數(shù)據(jù)，傳輸至終端設(shè)備，終端設(shè)備通過(guò)接入網(wǎng)絡(luò)進(jìn)行視頻會(huì)議。

在目前的視頻會(huì)議系統(tǒng)方案中，當(dāng)要建立視頻通話時(shí)，一般終端設(shè)備的處理流程是：視頻采集、編碼、傳輸、解碼、渲染等。在上述處理過(guò)程中，對(duì)終端設(shè)備的處理能力有一定要求，由于當(dāng)前視頻會(huì)議一般采用高清視頻數(shù)據(jù)，譬如1080p，那么對(duì)于攝像頭的數(shù)據(jù)傳輸需要更高的帶寬，對(duì)終端設(shè)備的硬件性能也有更高的要求，對(duì)于一些低性能的終端設(shè)備，則無(wú)法支持高清視頻數(shù)據(jù)處理，影響了視頻會(huì)議技術(shù)應(yīng)用。

發(fā)明內(nèi)容

本申請(qǐng)的目的旨在針對(duì)于上述技術(shù)缺陷，提供一種視頻數(shù)據(jù)處理方法、裝置、視頻會(huì)議系統(tǒng)及存儲(chǔ)介質(zhì)，以減少攝像頭的數(shù)據(jù)傳輸?shù)膸捫枨螅档蛯?duì)終端設(shè)備的硬件性能需求。

本申請(qǐng)?zhí)峁┮环N視頻數(shù)據(jù)處理方法，包括如下步驟：

從攝像頭采集編碼視頻流；其中，所述編碼視頻流為所述攝像頭對(duì)拍攝的圖像數(shù)據(jù)進(jìn)行編碼得到的碼流；

基于虛擬編碼器對(duì)所述編碼視頻流的編碼參數(shù)進(jìn)行檢測(cè)，并根據(jù)所述編碼參數(shù)反饋至所述攝像頭，以使得所述攝像頭對(duì)編碼過(guò)程進(jìn)行控制；

將所述編碼視頻流以透?jìng)鞣绞絺鬏斨两邮斩恕?/p>

在一個(gè)實(shí)施例中，所述基于虛擬編碼器對(duì)所述編碼視頻流的編碼參數(shù)進(jìn)行檢測(cè)，并根據(jù)所述編碼參數(shù)反饋至所述攝像頭，以使得所述攝像頭對(duì)編碼過(guò)程進(jìn)行控制的步驟包括：

基于虛擬編碼器根據(jù)當(dāng)前網(wǎng)絡(luò)帶寬的預(yù)估結(jié)果，統(tǒng)計(jì)過(guò)去一段時(shí)間內(nèi)編碼視頻流中的保護(hù)數(shù)據(jù)包數(shù)量；

根據(jù)所述保護(hù)數(shù)據(jù)包數(shù)量計(jì)算出當(dāng)前的編碼碼率；

通過(guò)所述虛擬編碼器將所述編碼碼率反饋至所述攝像頭，設(shè)置所述編碼碼率。

在一個(gè)實(shí)施例中，所述的視頻數(shù)據(jù)處理方法還包括：

當(dāng)編碼視頻流輸入所述虛擬編碼器時(shí)，檢測(cè)終端設(shè)備當(dāng)前的性能參數(shù)；根據(jù)所述性能參數(shù)對(duì)所述編碼視頻流進(jìn)行選擇性的丟包處理。

在一個(gè)實(shí)施例中，所述丟包處理包括：

若所述編碼視頻流具有優(yōu)先級(jí)，則丟棄低優(yōu)先級(jí)的視頻幀，并發(fā)送剩下的高優(yōu)先級(jí)的視頻幀；

若所述編碼視頻流不具有優(yōu)先級(jí)，則丟棄當(dāng)前視頻幀，并向所述攝像頭請(qǐng)求關(guān)鍵視頻幀。

在一個(gè)實(shí)施例中，所述的視頻數(shù)據(jù)處理方法還包括：

讀取從攝像頭采集的編碼視頻流，利用解碼模塊在本地對(duì)所述編碼視頻流進(jìn)行解碼，并將解碼得到視頻數(shù)據(jù)渲染到本地顯示器進(jìn)行顯示。

一種視頻數(shù)據(jù)處理裝置，包括：

采集單元，用于從攝像頭采集編碼視頻流；其中，所述編碼視頻流為所述攝像頭對(duì)拍攝的圖像數(shù)據(jù)進(jìn)行編碼得到的碼流；