[發(fā)明專利]基于區(qū)域劃分的邊緣協(xié)同目標(biāo)檢測(cè)方法及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 202011156787.2
• 申請(qǐng)日: 2020-10-26
• 公開(kāi)（公告）號(hào): CN112347875A
• 公開(kāi)（公告）日: 2021-02-09
• 發(fā)明（設(shè)計(jì)）人: 楊錚;王需;趙毅
• 申請(qǐng)（專利權(quán)）人: 清華大學(xué)
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;H04N19/172;H04N19/42;H04N19/44;H04N19/70
• 代理公司: 北京路浩知識(shí)產(chǎn)權(quán)代理有限公司 11002
• 代理人: 陳新生

1.一種基于區(qū)域劃分的邊緣協(xié)同目標(biāo)檢測(cè)方法，其特征在于，包括：

將當(dāng)前視頻幀劃分為多個(gè)區(qū)域；

對(duì)當(dāng)前視頻幀的每個(gè)區(qū)域進(jìn)行編碼后發(fā)送到邊緣端，以供所述邊緣端對(duì)每個(gè)區(qū)域進(jìn)行解碼，根據(jù)解碼后的每個(gè)區(qū)域進(jìn)行目標(biāo)檢測(cè)。

2.根據(jù)權(quán)利要求1所述的基于區(qū)域劃分的邊緣協(xié)同目標(biāo)檢測(cè)方法，其特征在于，將當(dāng)前視頻幀劃分為多個(gè)區(qū)域的步驟包括：

基于HEVC將當(dāng)前視頻幀劃分為M*N個(gè)區(qū)域；其中，M和N為正奇數(shù)；

將橫坐標(biāo)和縱坐標(biāo)均為奇數(shù)的區(qū)域作為第一類型區(qū)域；其中，所述橫坐標(biāo)的范圍為1至M，所述縱坐標(biāo)的范圍為1至N；

將每個(gè)視頻幀中除所述第一類型區(qū)域以外的區(qū)域作為第二類型區(qū)域；其中，每個(gè)第一類型區(qū)域的面積大于每個(gè)第二類型區(qū)域的面積。

3.根據(jù)權(quán)利要求2所述的基于區(qū)域劃分的邊緣協(xié)同目標(biāo)檢測(cè)方法，其特征在于，將當(dāng)前視頻幀劃分為多個(gè)區(qū)域的步驟之后還包括：

對(duì)于任一第一類型區(qū)域，將與該第一類型區(qū)域相鄰的第二類型區(qū)域和該第一類型區(qū)域作為一組區(qū)域，以供所述邊緣端根據(jù)解碼后的每組區(qū)域的組合進(jìn)行目標(biāo)檢測(cè)。

4.根據(jù)權(quán)利要求3所述的基于區(qū)域劃分的邊緣協(xié)同目標(biāo)檢測(cè)方法，其特征在于，對(duì)當(dāng)前視頻幀的每個(gè)區(qū)域進(jìn)行編碼后發(fā)送到邊緣端，以供所述邊緣端對(duì)每個(gè)區(qū)域進(jìn)行解碼，根據(jù)解碼后的每個(gè)區(qū)域進(jìn)行目標(biāo)檢測(cè)的步驟包括：

在當(dāng)前視頻幀的前一個(gè)視頻幀完成編碼后，將當(dāng)前視頻幀的每個(gè)區(qū)域壓縮為數(shù)據(jù)碼流；

將當(dāng)前視頻幀的每個(gè)區(qū)域的數(shù)據(jù)碼流分別封裝為數(shù)據(jù)包后發(fā)送到所述邊緣端，以供所述邊緣端對(duì)每個(gè)區(qū)域的數(shù)據(jù)包分別使用一個(gè)解碼器線程進(jìn)行并行解碼。

5.根據(jù)權(quán)利要求4所述的基于區(qū)域劃分的邊緣協(xié)同目標(biāo)檢測(cè)方法，其特征在于，對(duì)當(dāng)前視頻幀的每個(gè)區(qū)域進(jìn)行編碼的步驟包括：

根據(jù)當(dāng)前視頻幀的前一個(gè)視頻幀中每組區(qū)域預(yù)先檢測(cè)出的目標(biāo)數(shù)量，確定當(dāng)前視頻幀中每組區(qū)域的第一類型區(qū)域的優(yōu)先級(jí)；

根據(jù)每組區(qū)域中的第一類型區(qū)域的優(yōu)先級(jí)，確定每組區(qū)域中第一類型區(qū)域的壓縮步驟的優(yōu)先級(jí)和數(shù)據(jù)碼流封裝步驟的優(yōu)先級(jí)；

對(duì)于當(dāng)前視頻幀中任一第二類型區(qū)域，將與該第二類型區(qū)域相鄰的所有第一類型區(qū)域的壓縮步驟的優(yōu)先級(jí)中的最大值作為該第二類型區(qū)域的壓縮步驟的優(yōu)先級(jí)，將與該第二類型區(qū)域相鄰的所有第一類型區(qū)域的數(shù)據(jù)碼流封裝步驟的優(yōu)先級(jí)中的最大值作為該第二類型區(qū)域的數(shù)據(jù)碼流封裝步驟的優(yōu)先級(jí)；

根據(jù)當(dāng)前視頻幀中每個(gè)第一類型區(qū)域的壓縮步驟的優(yōu)先級(jí)和數(shù)據(jù)碼流封裝步驟的優(yōu)先級(jí)對(duì)每個(gè)第一類型區(qū)域進(jìn)行編碼，根據(jù)當(dāng)前視頻幀中每個(gè)第二類型區(qū)域的壓縮步驟的優(yōu)先級(jí)和數(shù)據(jù)碼流封裝步驟的優(yōu)先級(jí)對(duì)每個(gè)第二類型區(qū)域進(jìn)行編碼。

6.根據(jù)權(quán)利要求5所述的基于區(qū)域劃分的邊緣協(xié)同目標(biāo)檢測(cè)方法，其特征在于，根據(jù)當(dāng)前視頻幀的前一個(gè)視頻幀中每組區(qū)域預(yù)先檢測(cè)出的目標(biāo)數(shù)量，確定當(dāng)前視頻幀中每組區(qū)域的第一類型區(qū)域的優(yōu)先級(jí)；根據(jù)每組區(qū)域中的第一類型區(qū)域的優(yōu)先級(jí)，確定每組區(qū)域中第一類型區(qū)域的壓縮步驟的優(yōu)先級(jí)和數(shù)據(jù)碼流封裝步驟的優(yōu)先級(jí)的步驟包括：

按照當(dāng)前視頻幀的前一個(gè)視頻幀中每組區(qū)域包含的目標(biāo)數(shù)量從小到大的順序，對(duì)每組區(qū)域進(jìn)行排序，生成每組區(qū)域的數(shù)組；

將所述數(shù)組中每組區(qū)域的索引作為每組區(qū)域中第一類型區(qū)域的優(yōu)先級(jí)；

將每組區(qū)域中第一類型區(qū)域的優(yōu)先級(jí)作為每組區(qū)域中第一類型區(qū)域的壓縮步驟的優(yōu)先級(jí)；

將每組區(qū)域中第一類型區(qū)域的壓縮步驟的優(yōu)先級(jí)加上當(dāng)前視頻幀中第一類型區(qū)域的數(shù)量，獲取每組區(qū)域中第一類型區(qū)域的數(shù)據(jù)碼流封裝步驟的優(yōu)先級(jí)。

7.根據(jù)權(quán)利要求4-6任一所述的基于區(qū)域劃分的邊緣協(xié)同目標(biāo)檢測(cè)方法，其特征在于，將當(dāng)前視頻幀的每個(gè)區(qū)域的數(shù)據(jù)碼流分別封裝為數(shù)據(jù)包后發(fā)送到所述邊緣端的步驟之前還包括：

根據(jù)當(dāng)前視頻幀的圖像參數(shù)集，生成當(dāng)前視頻幀中每個(gè)區(qū)域的數(shù)據(jù)包的頭信息；

將當(dāng)前視頻幀中每個(gè)區(qū)域的數(shù)據(jù)包的頭信息發(fā)送給所述邊緣端，以供所述邊緣端根據(jù)所述頭信息對(duì)當(dāng)前視頻幀的每個(gè)區(qū)域進(jìn)行解碼。