[發(fā)明專利]前景提取方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201710154462.2
• 申請(qǐng)日: 2017-03-15
• 公開（公告）號(hào): CN106991684B
• 公開（公告）日: 2019-09-17
• 發(fā)明（設(shè)計(jì)）人: 李高健
• 申請(qǐng)（專利權(quán)）人: 上海信昊信息科技有限公司
• 主分類號(hào): G06T7/194
• 分類號(hào): G06T7/194
• 代理公司: 無錫華源專利商標(biāo)事務(wù)所(普通合伙) 32228
• 代理人: 聶啟新

1.一種前景提取方法，其特征在于，所述方法包括：

獲取待處理的圖像序列；

對(duì)所述圖像序列進(jìn)行前景提取，得到初始的前景團(tuán)塊序列，前景團(tuán)塊序列包括按時(shí)間順序排列的每幀圖像中的前景團(tuán)塊；

利用前景團(tuán)塊包含的像素點(diǎn)的數(shù)量區(qū)分所述初始的前景團(tuán)塊序列中的交疊前景團(tuán)塊和非交疊前景團(tuán)塊；

對(duì)所述交疊前景團(tuán)塊進(jìn)行第一次預(yù)分割，得到候選分割結(jié)果；

利用前景團(tuán)塊相似性對(duì)所述初始的前景團(tuán)塊序列中的非交疊前景團(tuán)塊進(jìn)行關(guān)聯(lián)；利用關(guān)聯(lián)后的非交疊前景團(tuán)塊對(duì)所述交疊前景團(tuán)塊進(jìn)行第二次預(yù)分割，得到預(yù)測分割結(jié)果；

計(jì)算所述候選分割結(jié)果與所述預(yù)測分割結(jié)果之間的距離，將最小的距離對(duì)應(yīng)的候選分割結(jié)果作為最終分割結(jié)果；

輸出最終的前景團(tuán)塊序列，所述最終的前景團(tuán)塊序列包括最終分割結(jié)果和非交疊前景團(tuán)塊。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述利用前景團(tuán)塊包含的像素點(diǎn)的數(shù)量區(qū)分所述初始的前景團(tuán)塊序列中的交疊前景團(tuán)塊和非交疊前景團(tuán)塊，包括：

檢測所述前景團(tuán)塊的面積是否滿足

若所述前景團(tuán)塊的面積滿足則確認(rèn)所述前景團(tuán)塊為交疊前景團(tuán)塊；

若所述前景團(tuán)塊的面積不滿足則確認(rèn)所述前景團(tuán)塊為非交疊前景團(tuán)塊；

其中，R表示一個(gè)前景團(tuán)塊序列，B_t表示前景團(tuán)塊，S(B_t)表示前景團(tuán)塊包含的像素點(diǎn)的數(shù)量，表示前景團(tuán)塊序列包含的像素點(diǎn)數(shù)量的中值，w為比例系數(shù)。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述利用前景團(tuán)塊相似性對(duì)所述初始的前景團(tuán)塊序列中的非交疊前景團(tuán)塊進(jìn)行關(guān)聯(lián)，包括：

檢測所述圖像序列中第t幀圖像中的第i個(gè)前景團(tuán)塊和第t-1幀圖像中的第j個(gè)前景團(tuán)塊是否滿足

若所述第i個(gè)前景團(tuán)塊和所述第j個(gè)前景團(tuán)塊滿足則將所述第i個(gè)前景團(tuán)塊與所述第j個(gè)前景團(tuán)塊關(guān)聯(lián)；

其中，表示所述第t幀圖像中第i個(gè)前景團(tuán)塊包含的像素點(diǎn)的數(shù)量，表示所述第j個(gè)前景團(tuán)塊包含的像素點(diǎn)的數(shù)量，表示所述第t幀圖像中第i個(gè)前景團(tuán)塊的方向梯度直方圖HOG特征，表示所述第j個(gè)前景團(tuán)塊的HOG特征，表示所述第i個(gè)前景團(tuán)塊與所述第j個(gè)前景團(tuán)塊之間的相似度。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述利用關(guān)聯(lián)后的非交疊前景團(tuán)塊對(duì)所述交疊前景團(tuán)塊進(jìn)行第二次預(yù)分割，得到預(yù)測分割結(jié)果，包括：

利用關(guān)聯(lián)后的所述非交疊前景團(tuán)塊預(yù)測各個(gè)非交疊前景團(tuán)塊對(duì)應(yīng)的物體在交疊前景團(tuán)塊中的位置及區(qū)域，生成預(yù)測分割結(jié)果。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)所述交疊前景團(tuán)塊進(jìn)行第一次預(yù)分割，得到候選分割結(jié)果，包括：

利用光流聚類方法將所述交疊前景團(tuán)塊分為若干個(gè)子團(tuán)塊；

根據(jù)所述子團(tuán)塊的光流特性，以所述子團(tuán)塊的交界線作為分界線分割所述子團(tuán)塊，得到候選分割結(jié)果。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述計(jì)算所述候選分割結(jié)果與所述預(yù)測分割結(jié)果之間的距離，將最小的距離對(duì)應(yīng)的候選分割結(jié)果作為最終分割結(jié)果，包括：

計(jì)算所述候選分割結(jié)果與所述預(yù)測分割結(jié)果之間的距離；

按如下公式確定最終分割結(jié)果：

其中，D(Ψ,K_i)＝1/(Ψ∩K_i)，Ψ^*表示最終分割結(jié)果，Ψ表示一種候選分割結(jié)果，K_i表示第i個(gè)預(yù)測分割結(jié)果，D(Ψ,K_i)表示第i個(gè)預(yù)測分割結(jié)果與所述候選分割結(jié)果之間的距離，(Ψ∩K_i)表示所述候選分割結(jié)果和所述第i個(gè)預(yù)測分割結(jié)果的各自對(duì)應(yīng)的前景團(tuán)塊的交疊區(qū)域的大小。

7.一種前景提取裝置，其特征在于，所述裝置包括：

獲取模塊，用于獲取待處理的圖像序列；

初始前景提取模塊，用于對(duì)所述圖像序列進(jìn)行前景提取，得到初始的前景團(tuán)塊序列，前景團(tuán)塊序列包括按時(shí)間順序排列的每幀圖像中的前景團(tuán)塊；

區(qū)分模塊，用于利用前景團(tuán)塊包含的像素點(diǎn)的數(shù)量區(qū)分所述初始的前景團(tuán)塊序列中的交疊前景團(tuán)塊和非交疊前景團(tuán)塊；

第一分割模塊，用于對(duì)所述交疊前景團(tuán)塊進(jìn)行第一次預(yù)分割，得到候選分割結(jié)果；

第二分割模塊，用于利用前景團(tuán)塊相似性對(duì)所述初始的前景團(tuán)塊序列中的非交疊前景團(tuán)塊進(jìn)行關(guān)聯(lián)；利用關(guān)聯(lián)后的非交疊前景團(tuán)塊對(duì)所述交疊前景團(tuán)塊進(jìn)行第二次預(yù)分割，得到預(yù)測分割結(jié)果；

確定模塊，用于計(jì)算所述候選分割結(jié)果與所述預(yù)測分割結(jié)果之間的距離，將最小的距離對(duì)應(yīng)的候選分割結(jié)果作為最終分割結(jié)果；

輸出模塊，用于輸出最終的前景團(tuán)塊序列，所述最終的前景團(tuán)塊序列包括最終分割結(jié)果和非交疊前景團(tuán)塊。