[發明專利]客流分析方法及裝置、存儲介質和系統

在審

• 申請號: 202010670971.2
• 申請日: 2020-07-13
• 公開（公告）號: CN111881785A
• 公開（公告）日: 2020-11-03
• 發明（設計）人: 范暢;趙馨逸
• 申請（專利權）人: 北京市商湯科技開發有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06Q30/02;G06K9/62;G06N3/04
• 代理公司: 北京博思佳知識產權代理有限公司 11415
• 代理人: 靳玫

本公開提供了一種客流分析方法及裝置、存儲介質和系統，其中，該方法包括：采集指定區域的視頻流；其中，所述指定區域至少包括店鋪內的部分區域；對所述視頻流中的圖像進行視覺任務處理，得到任務處理結果；按照與所述視覺任務對應的報文格式，根據所述任務處理結果，生成目標報文，并將所述目標報文向云端服務器發送。

技術領域

本公開涉及計算機視覺處理領域，尤其涉及一種客流分析方法及裝置、存儲介質和系統。

背景技術

目前，邊緣設備采集到視頻流后，可以將視頻流發送到云端服務器，由云端服務器對視頻流中的圖像進行識別，雖然減少了邊緣設備的計算和資源占用，但是邊緣設備對云服務的依賴較大。

另外，邊緣設備的部署主要以項目方式沉淀，存在項目周期長、投入成本高、且定制化需求較多的特點，主要是服務于購物中心、4S店、大型連鎖等具備一定規模的客戶，但是針對存量市場較大的零售小店、餐飲店、幼兒園等客戶，由于成本受限，缺少專門的交付團隊與運維團隊支持，可能無法對邊緣設備進行更好的維護。

發明內容

本公開提供了一種客流分析、對話生成方法及裝置、存儲介質和系統。

根據本公開實施例的第一方面，提供一種客流分析方法，用于邊緣設備，包括：采集指定區域的視頻流；其中，所述指定區域至少包括店鋪內的部分區域；對所述視頻流中的圖像進行視覺任務處理，得到任務處理結果；按照與所述視覺任務對應的報文格式，根據所述任務處理結果，生成目標報文，并將所述目標報文向云端服務器發送。

在一些可選實施例中，所述視覺任務包括以下至少之一：人臉識別任務、人體部位檢測任務；所述報文格式包括按照預設字段順序排列的至少一個報文字段；其中，所述至少一個報文字段包括以下至少之一：報文生成時間戳字段、上報報文的邊緣設備標識字段、用于采集所述視頻流的攝像頭標識字段、與所述任務處理結果對應的結果信息字段；所述視覺任務包括所述人臉識別任務，所述結果信息字段包括以下至少之一：身份標識信息字段、性別信息字段、年齡信息字段、人員類型信息字段；所述視覺任務包括所述人體部位檢測任務，所述結果信息字段包括用于指示存在人員進入所述指定區域的事件字段。

在一些可選實施例中，在所述視覺任務包括人臉識別任務的情況下，所述任務處理結果包括人臉識別結果；所述對所述視頻流中的圖像進行視覺任務處理，得到任務處理結果，包括：提取所述視頻流中的圖像所包括的人臉特征，得到第一人臉特征信息；將所述第一人臉特征信息與所述邊緣設備本地存儲的第一人臉庫中的人臉特征信息進行比對，得到比對結果；響應于所述比對結果為所述第一人臉特征信息與所述第一人臉庫中的第二人臉特征信息匹配，將所述第一人臉庫中與所述第二人臉特征信息對應的人臉標識信息作為人臉識別結果。

在一些可選實施例中，所述對所述視頻流中的圖像進行視覺任務處理，得到任務處理結果，還包括：將所述第一人臉特征信息輸入預先訓練好的人臉屬性檢測神經網絡，獲得所述人臉屬性檢測神經網絡輸出的與所述第一人臉特征信息對應的人臉屬性信息；所述將所述第一人臉庫中與所述第二人臉特征信息對應的人臉標識信息作為人臉識別結果，包括：將所述人臉標識信息和與所述第一人臉特征信息對應的人臉屬性信息中的至少一項作為所述人臉識別結果。

在一些可選實施例中，所述方法還包括：響應于所述比對結果為所述第一人臉庫中不存在與所述第一人臉特征信息匹配的人臉特征信息，在所述邊緣設備本地的第二人臉庫中，存儲所述第一人臉特征信息以及與所述第一人臉特征信息對應的關聯信息。

在一些可選實施例中，所述第一人臉庫所包括的人臉特征信息對應的人員類型屬于以下之一：會員、白名單成員、黑名單成員；所述按照與所述視覺任務對應的報文格式，根據所述任務處理結果，生成目標報文，包括：響應于所述人臉識別結果指示所述第一人臉特征信息對應的人員類型不屬于所述白名單成員，按照與所述視覺任務對應的報文格式，根據所述任務處理結果，生成目標報文。