[發明專利]多維度檢測跟蹤的客流統計方法、裝置、設備和介質

在審

• 申請號: 202210434088.2
• 申請日: 2022-04-24
• 公開（公告）號: CN114998819A
• 公開（公告）日: 2022-09-02
• 發明（設計）人: 李潤華;沈修平
• 申請（專利權）人: 上海悠絡客電子科技股份有限公司
• 主分類號: G06V20/52
• 分類號: G06V20/52;G06V20/40;G06V40/10;G06V10/62;G06V10/774;G06V10/82;G06V10/80
• 代理公司: 上海領匠知識產權代理有限公司 31404
• 代理人: 陳劍

本發明提供一種多維度檢測跟蹤的客流統計方法、裝置、設備和介質，通過獲取目標場景視頻流，提取有人員存在的幀圖像；基于目標檢測模型對各幀圖像進行頭部和軀體的多維度檢測；對檢測到的頭部對象和軀體對象分別進行跟蹤并分配跟蹤ID；關聯對應同一人員對象的頭部對象的檢測跟蹤數據與軀體對象的檢測跟蹤數據并融合為人員對象的檢測跟蹤數據，并依據人員對象的檢測跟蹤數據更新客流對象列表。在傳統單維度客流統計的基礎上，通過引入多維度數據檢測與跟蹤，能夠精確的檢測出人，而且極大的增加了對同一人的不同維度檢測結果干擾的魯棒性，實現了非常精準的客流統計。

技術領域

本發明涉及圖像檢測、圖像跟蹤技術領域。尤其是涉及一種多維度檢測跟蹤的客流統計方法、裝置、設備和介質。

背景技術

客流統計技術對于商業零售門店或者大型公共場所來說，有著重要的意義。例如商業零售門店可以通過客流統計分析消費者的進店率、駐留率，挖掘商鋪關聯關系，為運營決策提供重要的數據支持。再如景區場景可以根據客流情況，分析客流規律，分析各個景點的情況，了解游客行程路線，為后期建設提供數據支持。

現在的客流統計技術主要分為如下幾類：

一、依靠硬件的紅外線客流統計、WiFi探針客流統計等，這些技術不能進行軌跡追蹤、客流信息不準確、不能進行雙向客流統計，現在使用已經較少。

二、傳統的手動提取特征的視覺客流統計，該技術基于視頻，對視頻中的每一幀，基于傳統的手動提取特征的技術檢測出人臉、人頭、頭肓、人體等模式中的一種，然后對其進行跟蹤，從而實現客流統計。這種方法能夠實現軌跡跟蹤，能進行雙向客流統計，但受限于檢測技術，其準確率不夠理想。

三、基于深度學習的視覺客流統計技術，該技術基于視頻，對視頻中的每一幀，使用了深度學習的檢測技術(例)來檢測人臉、人頭、頭肓、人體等模式中的一種，然后對其進行跟蹤，從而實現客流統計。這種方法同樣能夠實現軌跡跟蹤，能進行雙向客流統計，檢測準確率也有大幅改進，但受到軌跡中斷、環境中的部分遮擋等影響，準確率仍然有所欠缺。

綜上，基于硬件的客流統計技術無法覆蓋各種場景；使用傳統的手動提取特征的視覺客流統計技術受到檢測技術的影響，準確率不高；基于深度學習的視覺客流技術，在跟蹤過程中受到軌跡中斷、環境中的部分遮擋等影響，準確率仍然達到理想的水準。

發明內容

鑒于以上所述現有技術的缺點，本發明的目的在于提供一種多維度檢測跟蹤的客流統計方法、裝置、設備和介質，用于解決現有技術中客流統計技術存在的不足。

為實現上述目的及其他相關目的，本發明提供一種多維度檢測跟蹤的客流統計方法，所述方法包括：獲取目標場景視頻流，提取有人員存在的幀圖像；基于目標檢測模型對各幀圖像進行頭部和軀體的多維度檢測；對檢測到的頭部對象和軀體對象分別進行跟蹤并分配跟蹤ID；關聯對應同一人員對象的頭部對象的檢測跟蹤數據與軀體對象的檢測跟蹤數據并融合為人員對象的檢測跟蹤數據，并依據人員對象的檢測跟蹤數據更新客流對象列表。

于本發明的一實施例中，所述目標檢測模型的獲取方法包括：獲取目標場景的監控視頻并提取有人員存在的幀圖像；對所述幀圖像中各人員的頭部與軀干分別進行標注；將標注過的幀圖像劃分為訓練數據與評估數據，基于深度學習視覺對象檢測方法對所述訓練數據進行訓練，并利用所述評估數據進行驗證，以獲得訓練后的目標檢測模型。

于本發明的一實施例中，所述關聯對應同一人員對象的頭部對象的檢測跟蹤數據與軀體對象的檢測跟蹤數據并融合為人員對象的檢測跟蹤數據，包括：遍歷軀體對象列表，并針對當前軀體對象查找所有與其檢測框面積重疊大于預設百分比的未被關聯的頭部對象：將找到的頭部對象與當前軀體對象綁定為一個人員對象，以存入人員對象列表，并標記該頭部對象為已關聯；或者，當未找到頭部對象時，則將當前軀體對象單獨成為一個人員對象并存入人員對象列表。