[發(fā)明專利]基于雙目立體視覺行人檢測的柜臺評價方法與系統(tǒng)

在審

• 申請?zhí)枺?/td>: 201611157648.5
• 申請日: 2016-12-15
• 公開（公告）號: CN108230351A
• 公開（公告）日: 2018-06-29
• 發(fā)明（設(shè)計）人: 王峰;楊學(xué)軍
• 申請（專利權(quán)）人: 上海杰軒智能科技有限公司
• 主分類號: G06T7/246
• 分類號: G06T7/246;G06T7/11;G06T7/136;G06T7/194;G06T7/80
• 代理公司: 上海愉騰專利代理事務(wù)所(普通合伙) 31306
• 代理人: 唐海波

本發(fā)明公開了一種基于視覺行人檢測的柜臺評價方法與系統(tǒng)，用于判斷柜臺對行人的吸引力及商業(yè)價值。系統(tǒng)包括雙目平行攝像機、嵌入式處理器、通信等模塊。系統(tǒng)靠柜臺一側(cè)傾斜安裝，對來往的行人進行實時檢測，其方法步驟為：標(biāo)定左右攝像機，精確標(biāo)定主點差；同步采集左右圖像，通過混合高斯背景建模檢測前景運動目標(biāo)；按照自適應(yīng)的窗口立體匹配方法得到前景目標(biāo)的視差圖像；生成前景目標(biāo)在地面上的二維投影圖像；對行人進行檢測、跟蹤、計數(shù)和平均速度計算；進行柜臺吸引力及商業(yè)價值的分析及評價。本發(fā)明采用雙目攝像機和立體視覺原理檢測行人目標(biāo)，算法魯棒性高，抗干擾性強，檢測精度高，評價指標(biāo)有實用價值。

技術(shù)領(lǐng)域

本發(fā)明涉及計算機視覺技術(shù)應(yīng)用領(lǐng)域，尤其涉及一種基于雙目立體視覺行人檢測的柜臺評價方法與系統(tǒng)。

背景技術(shù)

隨著人們生活水平的提高，逛商場、購物已成為一種常見的業(yè)余生活方式。對于商家而言，則更關(guān)心商場中的柜臺對行人的吸引力和柜臺的商業(yè)價值。行人平均速度是位移與時間的比，在一定程度上可以衡量過往行人對柜臺的感興趣程度。經(jīng)過柜臺前行人的速度越慢，反映了該柜臺的吸引力越大；而柜臺的商業(yè)價值與通過柜臺前的行人數(shù)量及其速度有關(guān)，數(shù)量越多、速度越慢則價值越大。通過智能檢測柜臺前過往行人的數(shù)量與速度，可以有效地分析柜臺對顧客的吸引力和柜臺的商業(yè)價值。

計算機智能視頻分析是人工智能領(lǐng)域中的一個新興的發(fā)展方向和廣受關(guān)注的課題，其核心是計算機視覺技術(shù)。計算機視覺通過圖像傳感器獲得圖像或圖像序列，進而通過計算機采用圖像處理、模式識別、人工智能等技術(shù)相結(jié)合的手段分析理解這些圖像，對三維世界進行描述和解釋，最終目標(biāo)是能夠代替人腦完成對現(xiàn)實世界的認識與理解。

雙目立體視覺系統(tǒng)是一種先進的計算機視覺系統(tǒng)，它模擬人類雙眼的立體感知過程，使用雙目攝像機從兩個不同的位置獲得平面視圖，可分析得到物體的三維深度信息，能夠有效避免場景光線變化、陰影、透視效應(yīng)及遮擋的影響。相比于常用的單目視覺檢測技術(shù)，采用雙目立體視覺技術(shù)可靈活適應(yīng)不同的應(yīng)用場景，得到更好的行人檢測精度，進而可以更加準(zhǔn)確地評估柜臺的吸引力與商業(yè)價值。

發(fā)明內(nèi)容

鑒于目前存在的上述不足，本發(fā)明提供一種基于雙目立體視覺行人檢測的柜臺評價方法與系統(tǒng)，能夠檢測并分析商場中柜臺前行人速度、數(shù)量的系統(tǒng)，并進而給出柜臺的吸引力與商業(yè)價值。

為達到上述目的，本發(fā)明的實施例采用如下技術(shù)方案：

一種基于雙目立體視覺的行人檢測系統(tǒng)，包括雙目平行攝像機、DSP處理器、通信模塊和上位主機，所述雙目平行攝像機包括左攝像機A1、右攝像機A2，分別與DSP處理器相連，用于采集左右圖像；所述DSP處理器與上位主機相連，用于數(shù)據(jù)通信及實時數(shù)字視頻傳輸。

一種基于雙目立體視覺行人檢測的柜臺評價方法，采用上述系統(tǒng)進行檢測和評價，所述方法包括以下步驟：

標(biāo)定左右攝像機，精確標(biāo)定主點差；

同步采集左右圖像，通過混合高斯背景建模檢測前景運動目標(biāo)；

按照自適應(yīng)的窗口立體匹配方法得到前景目標(biāo)的視差圖像；

生成前景目標(biāo)在地面上的二維投影圖像；

對行人進行檢測、跟蹤、計數(shù)和平均速度計算；

進行柜臺吸引力及商業(yè)價值的分析及評價。

依照本發(fā)明的一個方面，所述步驟標(biāo)定左右攝像機，精確標(biāo)定主點差包括：標(biāo)定左右攝像機獲得攝像機內(nèi)外參數(shù)，再采用人機交互的方式對左右攝像機進行主點差標(biāo)定，獲得精確的主點差參數(shù)，確定系統(tǒng)的檢測范圍。

依照本發(fā)明的一個方面，所述標(biāo)定左右攝像機獲得攝像機內(nèi)外參數(shù)，再采用人機交互的方式對左右攝像機進行主點差標(biāo)定，獲得精確的主點差參數(shù)，確定系統(tǒng)的檢測范圍，其具體如下：