[發(fā)明專利]運(yùn)動(dòng)物體檢測(cè)方法及其相關(guān)設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 202310043284.1
• 申請(qǐng)日: 2023-01-29
• 公開（公告）號(hào): CN116052047B
• 公開（公告）日: 2023-10-03
• 發(fā)明（設(shè)計(jì)）人: 田賢浩;王瑞星
• 申請(qǐng)（專利權(quán)）人: 榮耀終端有限公司
• 主分類號(hào): G06V20/40
• 分類號(hào): G06V20/40;G06V10/82;G06T7/246
• 代理公司: 深圳中一聯(lián)合知識(shí)產(chǎn)權(quán)代理有限公司 44414
• 代理人: 李紅艷

本申請(qǐng)?zhí)峁┮环N運(yùn)動(dòng)物體檢測(cè)方法及其相關(guān)設(shè)備，涉及圖像處理領(lǐng)域，該方法包括：獲取視頻碼流數(shù)據(jù)，并提取壓縮域語法元素，壓縮域語法元素用于指示視頻碼流數(shù)據(jù)中的變量信息；根據(jù)壓縮域語法元素，利用運(yùn)動(dòng)檢測(cè)網(wǎng)絡(luò)進(jìn)行檢測(cè)，確定目標(biāo)運(yùn)動(dòng)物體。本申請(qǐng)通過結(jié)合壓縮域語法元素，利用網(wǎng)絡(luò)模型進(jìn)行運(yùn)動(dòng)物體檢測(cè)，從而可以實(shí)現(xiàn)保證實(shí)時(shí)性、適應(yīng)復(fù)雜場(chǎng)景的目的。

技術(shù)領(lǐng)域

本申請(qǐng)涉及圖像處理領(lǐng)域，具體涉及一種運(yùn)動(dòng)物體檢測(cè)方法及其相關(guān)設(shè)備。

背景技術(shù)

運(yùn)動(dòng)物體檢測(cè)是計(jì)算機(jī)視覺的一個(gè)研究熱點(diǎn)，它可以為視頻分析、視頻檢索等提供支持，在人機(jī)交互、醫(yī)療診斷等領(lǐng)域都有著越來越重要的應(yīng)用前景。

現(xiàn)有提供的檢測(cè)方法大部分是在像素域通過算法對(duì)視頻像素?cái)?shù)據(jù)進(jìn)行計(jì)算，估計(jì)出視頻中的運(yùn)動(dòng)對(duì)象，然而，隨著視頻分辨率越來越高，需要處理的視頻像素?cái)?shù)據(jù)越來越龐大，如此操作將要耗費(fèi)大量的計(jì)算資源，計(jì)算速度也相應(yīng)變慢。對(duì)此，亟需一種新的運(yùn)動(dòng)物體檢測(cè)方法。

發(fā)明內(nèi)容

本申請(qǐng)?zhí)峁┮环N運(yùn)動(dòng)物體檢測(cè)方法及其相關(guān)設(shè)備，通過結(jié)合壓縮域語法元素，利用網(wǎng)絡(luò)模型進(jìn)行運(yùn)動(dòng)物體檢測(cè)，從而可以實(shí)現(xiàn)保證實(shí)時(shí)性、適應(yīng)復(fù)雜場(chǎng)景的目的。

第一方面，提供了一種運(yùn)動(dòng)物體檢測(cè)方法，該方法包括：

獲取視頻碼流數(shù)據(jù)，并提取壓縮域語法元素，所述壓縮域語法元素用于指示所述視頻碼流數(shù)據(jù)中的變量信息；

根據(jù)所述壓縮域語法元素，利用運(yùn)動(dòng)檢測(cè)網(wǎng)絡(luò)進(jìn)行檢測(cè)，確定目標(biāo)運(yùn)動(dòng)物體。

本申請(qǐng)實(shí)施例可以直接利用視頻編碼過程中產(chǎn)生的運(yùn)動(dòng)信息，節(jié)省了運(yùn)動(dòng)信息的計(jì)算步驟；另外，又結(jié)合了運(yùn)動(dòng)檢測(cè)網(wǎng)絡(luò)進(jìn)行檢測(cè)，從而可以實(shí)現(xiàn)高效、快速的視頻運(yùn)動(dòng)目標(biāo)檢測(cè)任務(wù)，在保證實(shí)時(shí)性的基礎(chǔ)下，解決相關(guān)方法中在復(fù)雜場(chǎng)景下的魯棒性問題。

結(jié)合第一方面，在第一方面的某些實(shí)現(xiàn)方式中，根據(jù)所述壓縮域語法元素，利用運(yùn)動(dòng)檢測(cè)網(wǎng)絡(luò)進(jìn)行檢測(cè)，確定目標(biāo)運(yùn)動(dòng)物體，包括：

根據(jù)所述壓縮域語法元素，確定運(yùn)動(dòng)特征；

根據(jù)所述運(yùn)動(dòng)特征，生成二維矩陣；

將所述二維矩陣輸入所述運(yùn)動(dòng)檢測(cè)網(wǎng)絡(luò)進(jìn)行檢測(cè)，確定所述目標(biāo)運(yùn)動(dòng)物體。

在本申請(qǐng)實(shí)施例中，本申請(qǐng)無需解碼幀圖像數(shù)據(jù)，可直接從壓縮域中提取可靠的壓縮域語法元素進(jìn)行運(yùn)動(dòng)分析，因此處理速度容易達(dá)到實(shí)時(shí)性。又結(jié)合了運(yùn)動(dòng)檢測(cè)網(wǎng)絡(luò)進(jìn)行檢測(cè)，從而可以實(shí)現(xiàn)高效、快速的視頻運(yùn)動(dòng)目標(biāo)檢測(cè)任務(wù)，在保證實(shí)時(shí)性的基礎(chǔ)下，解決相關(guān)方法中在復(fù)雜場(chǎng)景下的魯棒性弱、性能差的問題。

結(jié)合第一方面，在第一方面的某些實(shí)現(xiàn)方式中，根據(jù)所述壓縮域語法元素，確定運(yùn)動(dòng)特征，包括：

根據(jù)P幀的壓縮域語法元素，確定P幀對(duì)應(yīng)的運(yùn)動(dòng)特征，所述視頻碼流數(shù)據(jù)包括I幀、P幀和B幀；

根據(jù)B幀的壓縮域語法元素，確定B幀對(duì)應(yīng)的運(yùn)動(dòng)特征；

根據(jù)所述I幀前后相鄰的P幀對(duì)應(yīng)的運(yùn)動(dòng)特征和/或B幀對(duì)應(yīng)的運(yùn)動(dòng)特征，利用插值方法，確定所述I幀對(duì)應(yīng)的運(yùn)動(dòng)特征。

在本申請(qǐng)實(shí)施例中，結(jié)合P幀和B幀的運(yùn)動(dòng)信息，基于運(yùn)動(dòng)物體的時(shí)空連貫性，對(duì)運(yùn)動(dòng)特征進(jìn)行插值處理，從而可以得到I幀的運(yùn)動(dòng)信息，這樣就可以確定出每幀對(duì)應(yīng)的運(yùn)動(dòng)信息。

結(jié)合第一方面，在第一方面的某些實(shí)現(xiàn)方式中，所述方法還包括：

對(duì)所述I幀、所述P幀和所述B幀對(duì)應(yīng)的運(yùn)動(dòng)特征，進(jìn)行平滑處理。

在本申請(qǐng)實(shí)施例中，進(jìn)行平滑處理后，相鄰視頻幀之間的運(yùn)動(dòng)信息過渡更加自然，可以去除誤檢區(qū)域的噪聲，還可以避免出現(xiàn)個(gè)別數(shù)據(jù)異常、差異較大的情況。

結(jié)合第一方面，在第一方面的某些實(shí)現(xiàn)方式中，所述壓縮域語法元素包括：編碼比特量、運(yùn)動(dòng)矢量和殘差系數(shù)。