[發(fā)明專利]用于跟蹤對(duì)象的方法和系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201810125036.0
• 申請(qǐng)日: 2018-02-07
• 公開（公告）號(hào): CN108399628B
• 公開（公告）日: 2023-09-05
• 發(fā)明（設(shè)計(jì)）人: D·迪努;M·C·蒙特亞努;A·卡里曼
• 申請(qǐng)（專利權(quán)）人: 快圖有限公司
• 主分類號(hào): G06T7/246
• 分類號(hào): G06T7/246
• 代理公司: 北京市金杜律師事務(wù)所 11256
• 代理人: 鄭立柱

1.一種用于跨圖像流跟蹤對(duì)象的方法，所述方法包括：

a)將所述圖像流的初始幀傳遞通過第一神經(jīng)網(wǎng)絡(luò)，所述第一神經(jīng)網(wǎng)絡(luò)包括多個(gè)卷積層，每個(gè)卷積層產(chǎn)生至少一個(gè)特征圖；

b)將從所述第一神經(jīng)網(wǎng)絡(luò)輸出的特征圖提供到第二多分類器神經(jīng)網(wǎng)絡(luò)以確定感興趣區(qū)域ROI，所述第二多分類器神經(jīng)網(wǎng)絡(luò)包括至少一個(gè)完全連接的層，所述感興趣區(qū)域劃定所述初始幀中給定類別對(duì)象的邊界；

c)存儲(chǔ)從所述第一神經(jīng)網(wǎng)絡(luò)的第一卷積層輸出的與所述ROI相對(duì)應(yīng)的特征圖，以作為用于第三多層神經(jīng)網(wǎng)絡(luò)的至少第一神經(jīng)元層的權(quán)重；

d)從所述圖像流獲取后續(xù)幀；

e)使用所述第一神經(jīng)網(wǎng)絡(luò)逐ROI掃描所述初始幀的至少一部分，以從所述第一卷積層為每個(gè)ROI產(chǎn)生相應(yīng)的特征圖；

f)將從步驟e)獲得的所述特征圖提供到所述第三多層神經(jīng)網(wǎng)絡(luò)，以提供與如下的匹配水平成比例的輸出，所述匹配水平即用于所述第一神經(jīng)元層的所述權(quán)重的所述特征圖值與被提供用于標(biāo)識(shí)具有與存儲(chǔ)的特征圖最佳匹配的特征圖的候選ROI的特征圖值之間的匹配水平；

g)響應(yīng)于所述匹配水平滿足閾值，根據(jù)用于最佳匹配候選ROI的特征圖更新來指示所述對(duì)象的特征的所述存儲(chǔ)的特征圖，并且根據(jù)用于來自所述后續(xù)幀的最佳匹配的候選ROI的特征圖來更新用于所述神經(jīng)元的所述權(quán)重；

h)重復(fù)步驟d)到g)直到所述匹配水平不能滿足所述閾值。

2.根據(jù)權(quán)利要求1所述的方法，其中所述第一神經(jīng)網(wǎng)絡(luò)和所述第二多分類器神經(jīng)網(wǎng)絡(luò)中的每個(gè)被離線訓(xùn)練。

3.根據(jù)權(quán)利要求1所述的方法，其中所述第三多層神經(jīng)網(wǎng)絡(luò)的至少一層包括多個(gè)神經(jīng)元，所述多個(gè)神經(jīng)元對(duì)來自所述第一神經(jīng)元層的所述輸出執(zhí)行sigmoid激活函數(shù)。

4.根據(jù)權(quán)利要求3所述的方法，其中所述第三多層神經(jīng)網(wǎng)絡(luò)的第三層包括至少一個(gè)神經(jīng)元，所述至少一個(gè)神經(jīng)元對(duì)第二層的所述神經(jīng)元的所述輸出進(jìn)行聚合。

5.根據(jù)權(quán)利要求1所述的方法，其中所述第三多層神經(jīng)網(wǎng)絡(luò)是非完全連接網(wǎng)絡(luò)。

6.根據(jù)權(quán)利要求1所述的方法，其中所述第一神經(jīng)網(wǎng)絡(luò)是向前連接的神經(jīng)網(wǎng)絡(luò)。

7.根據(jù)權(quán)利要求3所述的方法，包括提供所述sigmoid激活函數(shù)的分段線性近似。

8.根據(jù)權(quán)利要求1所述的方法，其中所述掃描包括跨后續(xù)幀的掃描區(qū)域來逐ROI掃描，所述掃描區(qū)域是來自先前幀的所述最佳匹配候選ROI以及在先前幀和所述后續(xù)幀之間的幀間移動(dòng)的函數(shù)。

9.根據(jù)權(quán)利要求1所述的方法，還包括周期性地執(zhí)行步驟a)至c)。

10.根據(jù)權(quán)利要求1所述的方法，包括響應(yīng)于所述最佳匹配沒有超過所述閾值，僅執(zhí)行步驟a)至c)。

11.根據(jù)權(quán)利要求1所述的方法，其中所述第一卷積層是所述第一神經(jīng)網(wǎng)絡(luò)的中間層。

12.一種圖像處理系統(tǒng)，所述圖像處理系統(tǒng)包括數(shù)字邏輯，所述數(shù)字邏輯用于實(shí)施根據(jù)權(quán)利要求1所述的方法。