[發(fā)明專利]多視頻源圖像處理方法和裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201710789911.0
• 申請(qǐng)日: 2017-09-04
• 公開（公告）號(hào): CN107454455A
• 公開（公告）日: 2017-12-08
• 發(fā)明（設(shè)計(jì)）人: 何開江;馬傳文;楊麗寧;鐘炎培
• 申請(qǐng)（專利權(quán)）人: 西安萬(wàn)像電子科技有限公司
• 主分類號(hào): H04N21/431
• 分類號(hào): H04N21/431;H04N21/4402
• 代理公司: 北京康信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司11240
• 代理人: 趙囡囡

技術(shù)領(lǐng)域

本發(fā)明涉及圖像壓縮領(lǐng)域，具體而言，涉及一種多視頻源圖像處理方法和裝置。

背景技術(shù)

視頻圖像的質(zhì)量受網(wǎng)絡(luò)帶寬的影響很大，良好的網(wǎng)絡(luò)帶寬能提供更好的視頻圖像質(zhì)量。在一對(duì)一的視頻傳輸系統(tǒng)中，視頻源需要通過(guò)網(wǎng)絡(luò)發(fā)送一幅圖像的所有像素。根據(jù)應(yīng)用場(chǎng)景的發(fā)展需要，一對(duì)多，多對(duì)一和多對(duì)多的視頻傳輸系統(tǒng)也迅速發(fā)展。當(dāng)前有很多成熟的一對(duì)多視頻傳輸系統(tǒng)即拼接顯示屏系統(tǒng)方案，但多對(duì)一和多對(duì)多的視頻傳輸系統(tǒng)方案并不多見。

在多對(duì)一和多對(duì)多的視頻傳輸系統(tǒng)中，如果仍然使用傳統(tǒng)的一對(duì)一傳輸技術(shù)，所述每個(gè)視頻源通過(guò)網(wǎng)絡(luò)發(fā)送一幅圖像的所有像素，那么這種視頻傳輸系統(tǒng)將需要巨大的網(wǎng)絡(luò)帶寬，這幾乎是不可想象的。本專利提出了一種在視頻源端分割視頻圖像和在中控臺(tái)拼接視頻圖像的方法，解決多對(duì)一的視頻圖像傳輸帶寬問(wèn)題。

目前針對(duì)多對(duì)一的視頻圖像傳輸主要有以下兩種方案：

1、多視頻源發(fā)送完整圖像，在中控進(jìn)行圖像分割和拼接；

2、采用多級(jí)視頻處理模塊，每級(jí)采用二對(duì)一完成視頻疊加的方式實(shí)現(xiàn)視頻拼接。

上述的兩種方案局限性如下：

1、多個(gè)視頻源各自發(fā)送完整圖像時(shí)，需要占用非常大的網(wǎng)絡(luò)帶寬，隨著視頻源的增加，網(wǎng)絡(luò)帶寬呈線性增加，影響視頻質(zhì)量和應(yīng)用范圍。

2、多級(jí)視頻處理模塊需要較多的資源和處理時(shí)延；在視頻處理模塊完成視頻的分割，需要處理的視頻是多個(gè)視頻源的完整信號(hào)，需要較大的網(wǎng)絡(luò)帶寬。

針對(duì)相關(guān)技術(shù)中的多視頻源圖像傳輸方法耗費(fèi)過(guò)多網(wǎng)絡(luò)或系統(tǒng)資源的技術(shù)問(wèn)題，目前尚未提出有效的解決方案。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例提供了一種多視頻源圖像處理方法和裝置，以至少解決相關(guān)技術(shù)中的多視頻源圖像傳輸方法耗費(fèi)過(guò)多網(wǎng)絡(luò)或系統(tǒng)資源的技術(shù)問(wèn)題。

根據(jù)本發(fā)明實(shí)施例的一個(gè)方面，提供了一種多視頻源圖像處理方法，該方法包括：分別確定多個(gè)視頻源中每個(gè)視頻源在顯示屏上的顯示區(qū)域；分別通知每個(gè)視頻源對(duì)應(yīng)的視頻源在顯示屏上的顯示區(qū)域，其中，每個(gè)視頻源用于在接收通知之后確定其需要在顯示屏上的顯示區(qū)域上顯示的圖像數(shù)據(jù)并反饋；獲取每個(gè)視頻源反饋的圖像數(shù)據(jù)；根據(jù)每個(gè)視頻源反饋的圖像數(shù)據(jù)確定顯示屏上的顯示內(nèi)容。

進(jìn)一步地，分別確定多個(gè)視頻源中每個(gè)視頻源在顯示屏上的顯示區(qū)域包括：分別確定每個(gè)視頻源的對(duì)應(yīng)圖層和在對(duì)應(yīng)圖層上的顯示區(qū)域，分別通知每個(gè)視頻源對(duì)應(yīng)的視頻源在顯示屏上的顯示區(qū)域包括：分別向每個(gè)視頻源通知其在對(duì)應(yīng)圖層上的顯示區(qū)域以及至少在對(duì)應(yīng)圖層之上圖層的顯示區(qū)域，其中，每個(gè)視頻源用于根據(jù)其在對(duì)應(yīng)圖層上的顯示區(qū)域以及至少在對(duì)應(yīng)圖層之上圖層的顯示區(qū)域確定其需要在顯示屏上的顯示區(qū)域上顯示的圖像數(shù)據(jù)并反饋。

進(jìn)一步地，在分別向每個(gè)視頻源通知其在對(duì)應(yīng)圖層上的顯示區(qū)域以及至少在對(duì)應(yīng)圖層之上圖層的顯示區(qū)域之后，該方法還包括：每個(gè)視頻源將對(duì)應(yīng)圖層上的顯示區(qū)域中去除在對(duì)應(yīng)圖層之上的圖層的顯示區(qū)域，得到其在顯示屏上的顯示區(qū)域；每個(gè)視頻源將其在顯示屏上的顯示區(qū)域的坐標(biāo)范圍轉(zhuǎn)換為在自身坐標(biāo)系下的坐標(biāo)范圍，并反饋在其自身坐標(biāo)系下的坐標(biāo)范圍之內(nèi)的圖像數(shù)據(jù)。

進(jìn)一步地，分別確定每個(gè)視頻源的對(duì)應(yīng)圖層和在對(duì)應(yīng)圖層上的顯示區(qū)域包括：接收對(duì)多個(gè)視頻源中任一視頻源的對(duì)應(yīng)圖層和/或在對(duì)應(yīng)圖層上的顯示區(qū)域進(jìn)行改變的操作；根據(jù)操作重新確定每個(gè)視頻源的對(duì)應(yīng)圖層和在對(duì)應(yīng)圖層上的顯示區(qū)域。

進(jìn)一步地，多個(gè)視頻源包括第一視頻源，在接收到對(duì)第一視頻源的對(duì)應(yīng)圖層進(jìn)行改變的操作的情況下，根據(jù)操作重新確定每個(gè)視頻源的對(duì)應(yīng)圖層和在對(duì)應(yīng)圖層上的顯示區(qū)域包括：判斷操作是否對(duì)第一視頻源的對(duì)應(yīng)圖層進(jìn)行改變；如果判斷結(jié)果為是，則將第一圖層與第二圖層之間的所有圖層以及第二圖層所對(duì)應(yīng)的視頻源依次變更一個(gè)圖層，變更的方向與操作的方向相反，其中，第一圖層為第一視頻源的原圖層，第二圖層為第一視頻源在變更之后的圖層。

根據(jù)本發(fā)明實(shí)施例的另一方面，還提供了一種多視頻源圖像處理裝置，該裝置包括：第一確定單元，用于分別確定多個(gè)視頻源中每個(gè)視頻源在顯示屏上的顯示區(qū)域；通知單元，用于分別通知每個(gè)視頻源對(duì)應(yīng)的視頻源在顯示屏上的顯示區(qū)域，其中，每個(gè)視頻源用于在接收通知之后確定其需要在顯示屏上的顯示區(qū)域上顯示的圖像數(shù)據(jù)并反饋；獲取單元，用于獲取每個(gè)視頻源反饋的圖像數(shù)據(jù)；第二確定單元，用于根據(jù)每個(gè)視頻源反饋的圖像數(shù)據(jù)確定顯示屏上的顯示內(nèi)容。