[發明專利]一種基于人臉識別及數據分析的精準營銷系統

在審

• 申請號: 201910361380.4
• 申請日: 2019-04-30
• 公開（公告）號: CN110070423A
• 公開（公告）日: 2019-07-30
• 發明（設計）人: 文良均;劉凱
• 申請（專利權）人: 文良均
• 主分類號: G06Q30/06
• 分類號: G06Q30/06;G06K9/00
• 代理公司: 重慶晶智匯知識產權代理事務所(普通合伙) 50229
• 代理人: 施永卿

1.一種基于人臉識別及數據分析的自動售賣機精準營銷系統，其特征在于：它由自動人臉系統、人臉庫系統、自動畫像系統、檢索推薦系統組成；

所述自動售賣機可安裝高清攝像頭，實時獲取自動售賣機前圖像；

所述自動人臉系統，通過人臉識別模型和人臉特征模型完成圖像中的人臉識別和人臉特征提取；

所述人臉識別模型和人臉特征模型均為卷積神經網絡模型，線下訓練得到；

所述人臉庫系統，對提取的人臉特征在人臉信息庫中進行存儲和分類，包括入庫操作、記錄操作、查詢操作、購物習慣更新操作；

所述人臉信息庫，每條信息包括人臉特征、人臉特征對應的購物信息欄及人臉特征對應的購物習慣欄，以人臉特征為索引；

所述入庫操作，對人臉特征進行人臉信息庫內查找，查找失敗，則新增信息，保存人臉特征；查找成功不做任何處理；

所述記錄操作，對人臉特征對應的顧客的購物信息保存于人臉信息庫中人臉特征對應的購物信息欄；

所述購物信息包括顧客購物時間、購物總時長、顧客關注過商品種類及顧客購買商品種類；

所述查詢操作，使用人臉特征在人臉信息庫內查找，獲取人臉特征對應的購物習慣信息；若購物習慣信息為空，則獲取失敗；

所述購物習慣更新操作，將顧客的購物習慣保存于人臉信息庫中顧客的人臉特征對應的購物習慣欄；

所述人臉信息庫內查找為遍歷比較人臉特征間距離，距離最小且小于門限值為查找成功，反之，查找失敗；所述距離計算公式：

L_ij＝1+exp(-1·||(V_i-V_j)||₂)

其中，人臉特征采用歐式距離

L_ij為歸一化歐式距離。

所述自動畫像系統，依據人臉特征所記錄的購物信息，使用統計分析方法和平均法分析其購買習慣；所述購買習慣包括習慣購物時間及興趣商品種類；

所述檢索推薦系統，通過人臉特征使用人臉庫系統的查詢操作，獲取該人臉特征對應顧客的購買習慣，結合當前的營銷方案進行精準營銷。

2.如權利要求1所述的精準營銷系統，其特征在于，它完成一次工作總體流程如下：

S101、自動人臉系統監測實時圖像，人臉識別模型開始檢測到人臉；

S102、自動人臉系統使用人臉特征模型完成人臉特征的提取；

S103、自動人臉系統使用人臉庫系統的入庫操作，完成人臉特征的存儲；

S104、自動人臉系統觸發檢索推薦系統；

S105、檢索推薦系統通過人臉特征使用人臉庫系統的查詢操作，獲取該人臉特征對應顧客的購買習慣，如獲取失敗，則不進行精準營銷推薦，若獲取成功，則結合當前的營銷方案進行精準營銷；

S106、自動人臉系統監測實時圖像，人臉識別模型檢測人臉失敗；觸發人臉庫系統的記錄操作；

S107、人臉庫系統使用記錄操作完成人臉特征對應顧客的購物信息；觸發自動畫像系統；

S108、自動畫像系統依據人臉特征所記錄的購物信息，分析其購物習慣，觸發人臉庫系統的購物習慣更新操作進行存儲方便下次查詢。

3.如權利要求2所述的精準營銷系統，其特征在于：所述人臉識別模型輸入為實時圖像，輸出實時圖像及對應的人臉數、人臉位置；

所述人臉位置為人臉矩形框和關鍵點坐標；所述關鍵點坐標包括左右眼、鼻子、嘴巴位置坐標。

4.如權利要求3所述的精準營銷系統，其特征在于：所述人臉特征模型輸入實時圖像及人臉位置，輸出人臉特征。

5.如權利要求4所述的精準營銷系統，其特征在于：所述人臉特征為256維歸一化行向量，歸一化公式如下：

式中，V＝(x₁,x₂,...,x₂₅₆)為歸一化前256維人臉特征，為歸一化后人臉特征。

6.如權利要求5所述的精準營銷系統，其特征在于：所述人臉庫系統的入庫操作，對人臉特征進行人臉信息庫內查找，查找失敗，則新增信息，保存人臉特征；查找成功，替換人臉特征。