[發(fā)明專利]基于嵌入式平臺(tái)的輕量級(jí)視頻分析系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 202010074352.7
• 申請(qǐng)日: 2020-01-22
• 公開（公告）號(hào): CN111225280B
• 公開（公告）日: 2021-10-01
• 發(fā)明（設(shè)計(jì)）人: 肖楚榮;馮瑞
• 申請(qǐng)（專利權(quán)）人: 復(fù)旦大學(xué)
• 主分類號(hào): H04N21/443
• 分類號(hào): H04N21/443;H04N21/234;H04N21/44;H04N21/254
• 代理公司: 上海德昭知識(shí)產(chǎn)權(quán)代理有限公司 31204
• 代理人: 郁旦蓉

本發(fā)明提供一種基于嵌入式平臺(tái)的輕量級(jí)視頻分析系統(tǒng)，用于對(duì)流媒體數(shù)據(jù)進(jìn)行輕量化處理從而獲得視頻分析結(jié)果并輸出，其特征在于，包括：流媒體模塊，用于獲取流媒體數(shù)據(jù)并對(duì)該流媒體數(shù)據(jù)進(jìn)行預(yù)處理得到預(yù)處理數(shù)據(jù)，流媒體數(shù)據(jù)至少包括視頻流式數(shù)據(jù)；視頻分析模塊，用于持續(xù)接收預(yù)處理數(shù)據(jù)并根據(jù)預(yù)設(shè)的視頻分析流程進(jìn)行分析得到視頻分析結(jié)果；數(shù)據(jù)持久化模塊，用于對(duì)視頻分析結(jié)果進(jìn)行持久化處理并作為動(dòng)態(tài)數(shù)據(jù)進(jìn)行存儲(chǔ)，其中，流媒體模塊、視頻分析模塊以及數(shù)據(jù)持久化模塊通過(guò)容器虛擬化技術(shù)部署在邊緣節(jié)點(diǎn)上，使得流媒體模塊、視頻分析模塊以及數(shù)據(jù)持久化模塊利用邊緣節(jié)點(diǎn)的計(jì)算資源完成視頻分析處理。

技術(shù)領(lǐng)域

本發(fā)明屬于計(jì)算機(jī)視覺(jué)領(lǐng)域，涉及一種視頻分析系統(tǒng)，具體涉及一種基于嵌入式平臺(tái)的輕量級(jí)視頻分析系統(tǒng)。

背景技術(shù)

在移動(dòng)互聯(lián)網(wǎng)時(shí)代，搭載Android、IOS和Windows phone等操作系統(tǒng)的移動(dòng)端設(shè)備急劇增長(zhǎng)，并塑造了移動(dòng)互聯(lián)網(wǎng)生態(tài)。借助移動(dòng)互聯(lián)網(wǎng)，人們的交流方式發(fā)生了極大的變化。在移動(dòng)互聯(lián)網(wǎng)興起之初，持有移動(dòng)端設(shè)備的用戶只能傳遞文字信息和圖片信息，而在移動(dòng)互聯(lián)網(wǎng)持續(xù)演進(jìn)的背景下，移動(dòng)端用戶已經(jīng)可以實(shí)時(shí)傳遞視頻信息，由此豐富了人們的網(wǎng)絡(luò)交流形式。進(jìn)入5G時(shí)代，基于互聯(lián)網(wǎng)而興起的一些新興技術(shù)，如：AR(AugmentedReality)、VR(VirtualReality)、IoT(InternetofThings)以及大數(shù)據(jù)技術(shù)等相繼得到了應(yīng)用，并持續(xù)受到社會(huì)的關(guān)注。在如此趨勢(shì)下，預(yù)計(jì)未來(lái)視頻流將會(huì)出現(xiàn)爆發(fā)式的增長(zhǎng)。根據(jù)思科發(fā)布的最新《視覺(jué)網(wǎng)絡(luò)指數(shù)》(VNI)報(bào)告預(yù)測(cè)，2022年當(dāng)年所產(chǎn)生的IP流量將是巨大的，預(yù)計(jì)會(huì)是互聯(lián)網(wǎng)誕生以來(lái)至2016年期間所產(chǎn)生的所有流量的總和。同時(shí)到2022年全球網(wǎng)民的總和將達(dá)到全球總?cè)丝诘?0\％，屆時(shí)將有超過(guò)280億太設(shè)備接入互聯(lián)網(wǎng)，這些設(shè)備所產(chǎn)生的流量將占據(jù)所有IP流量的82％。

然而，接入移動(dòng)互聯(lián)網(wǎng)的設(shè)備不斷增加，視頻信息流將占據(jù)IP流量的主導(dǎo)地位，這一發(fā)展趨勢(shì)已經(jīng)不可逆轉(zhuǎn)。視頻流在帶給外界豐富的信息的同時(shí)，其也會(huì)產(chǎn)生一定的負(fù)面作用，如：通信網(wǎng)絡(luò)擁堵、視頻流的傳輸存在時(shí)延，針對(duì)視頻進(jìn)行的分析難以實(shí)現(xiàn)無(wú)縫對(duì)接。這些問(wèn)題都是因?yàn)橐曨l流本身的規(guī)模導(dǎo)致的，每個(gè)視頻信息流的數(shù)據(jù)規(guī)模都相對(duì)較大，因此在具有對(duì)視頻流進(jìn)行分析處理的需求時(shí)，若是依舊采用傳統(tǒng)的視頻處理方式分析視頻流，其分析速率無(wú)疑會(huì)受到視頻流的影響，并進(jìn)一步延緩視頻流的傳輸效率。

發(fā)明內(nèi)容

為解決上述問(wèn)題，提供一種能夠在移動(dòng)邊緣端不同的資源環(huán)境下，實(shí)現(xiàn)輕量級(jí)視頻分析流程的部署，從而削弱視頻流的數(shù)據(jù)規(guī)模對(duì)視頻分析流程的影響的視頻分析系統(tǒng)，本發(fā)明采用了如下技術(shù)方案：

本發(fā)明提供了一種基于嵌入式平臺(tái)的輕量級(jí)視頻分析系統(tǒng)，用于對(duì)流媒體數(shù)據(jù)進(jìn)行輕量化處理從而獲得視頻分析結(jié)果并輸出，其特征在于，包括：流媒體模塊，用于獲取流媒體數(shù)據(jù)并對(duì)該流媒體數(shù)據(jù)進(jìn)行預(yù)處理得到預(yù)處理數(shù)據(jù)，流媒體數(shù)據(jù)至少包括視頻流式數(shù)據(jù)；視頻分析模塊，用于持續(xù)接收預(yù)處理數(shù)據(jù)并根據(jù)預(yù)設(shè)的視頻分析流程進(jìn)行分析得到視頻分析結(jié)果；數(shù)據(jù)持久化模塊，用于對(duì)視頻分析結(jié)果進(jìn)行持久化處理并作為動(dòng)態(tài)數(shù)據(jù)進(jìn)行存儲(chǔ)，其中，流媒體模塊、視頻分析模塊以及數(shù)據(jù)持久化模塊通過(guò)容器虛擬化技術(shù)部署在邊緣節(jié)點(diǎn)上，使得流媒體模塊、視頻分析模塊以及數(shù)據(jù)持久化模塊利用邊緣節(jié)點(diǎn)的計(jì)算資源完成視頻分析處理。

本發(fā)明提供的基于嵌入式平臺(tái)的輕量級(jí)視頻分析系統(tǒng)，還可以具有這樣的技術(shù)特征，還包括：API接入模塊，用于監(jiān)聽用戶的外部請(qǐng)求，該API接入模塊對(duì)外提供統(tǒng)一的API接口；以及路由模塊，其中，一旦API接入模塊監(jiān)聽到外部請(qǐng)求，就將該外部請(qǐng)求解析為內(nèi)部消息并對(duì)該外部請(qǐng)求的合法性進(jìn)行鑒別，若外部請(qǐng)求為合法請(qǐng)求，API接入模塊就將相應(yīng)的內(nèi)部消息發(fā)送給路由模塊并讓該路由模塊根據(jù)內(nèi)部消息的消息頭進(jìn)行分配；若外部請(qǐng)求為非法請(qǐng)求，API接入模塊根據(jù)預(yù)設(shè)程序?qū)υ撏獠空?qǐng)求進(jìn)行響應(yīng)。