[發明專利]基于行人主動感知的智慧社區廣告精準投放方法及裝置

在審

• 申請號: 202010480394.0
• 申請日: 2020-05-30
• 公開（公告）號: CN111724199A
• 公開（公告）日: 2020-09-29
• 發明（設計）人: 何斌;丁躍塵;周艷敏;李剛;朱忠攀;王志鵬;徐壽林
• 申請（專利權）人: 同濟大學
• 主分類號: G06Q30/02
• 分類號: G06Q30/02;G06N3/04;G06K9/00
• 代理公司: 上海科盛知識產權代理有限公司 31225
• 代理人: 王懷瑜

1.一種基于行人主動感知的智慧社區廣告精準投放方法，其特征在于，包括以下步驟：

行人圖像采集步驟：通過攝像機采集行人圖像，所述攝像機部署在社區的公共設施上；

行人識別步驟：通過目標檢測模塊對行人圖像進行人臉識別，若檢測到行人，則與預設的社區數據庫中的數據進行人臉比對，判斷該行人為社區內人員還是外來人員；

行人標簽化數據獲取步驟：若檢測到行人為社區內人員，則從社區數據庫中調取該行人對應的行人標簽化數據，所述行人標簽化數據包括表象特征數據和潛在特征數據；若檢測到的行人為外來人員，則獲取該外來人員的表象特征數據，并將社區數據庫中對應的表象特征數據的社區內人員的，出現頻次最多的潛在特征數據作為該外來人員的潛在特征數據，從而構建該外來人員的行人標簽化數據；

廣告投放步驟：將行人標簽化數據載入預先訓練好的廣告推薦系統中，獲取待投放的廣告數據，并傳輸到顯示屏中，所述顯示屏部署在社區的公共設施上；

臉部姿態角檢測步驟：根據行人圖像，識別行人臉部與攝像頭的位姿，判斷行人是否注意到投放的廣告，形成反饋數據，反饋到所述廣告推薦系統中。

2.根據權利要求1所述的一種基于行人主動感知的智慧社區廣告精準投放方法，其特征在于，行人識別步驟中，通過目標檢測算法對所述行人圖像進行人臉識別。

3.根據權利要求1所述的一種基于行人主動感知的智慧社區廣告精準投放方法，其特征在于，行人標簽化數據獲取步驟中，通過預先訓練好的ResNet18卷積神經網絡，從行人圖像中獲取外來人員的表象特征數據。

4.根據權利要求3所述的一種基于行人主動感知的智慧社區廣告精準投放方法，其特征在于，通過IMDB-WIKI人臉數據集對所述ResNet18卷積神經網絡進行訓練，所述ResNet18卷積神經網絡包括七個輸出神經元：兩個性別判斷輸出神經元和五個年齡段判斷數據神經元。

5.根據權利要求1所述的一種基于行人主動感知的智慧社區廣告精準投放方法，其特征在于，所述表象特征數據包括人臉、性別和年齡段數據。

6.根據權利要求1所述的一種基于行人主動感知的智慧社區廣告精準投放方法，其特征在于，廣告投放步驟中，所述廣告推薦系統的表達式為：

G_n×m＝U_n×k×A_k×m

式中，n為廣告推薦系統中用戶的數量，所述用戶根據所述行人標簽化數據構建，m為廣告的數量，G_n×m為用戶對廣告的評價得分矩陣，U_n×k為用戶隱含維度矩陣，A_k×m為廣告隱含維度矩陣，k為隱含維度的數量，所述用戶隱含維度矩陣基于所述行人標簽化數據建立，所述廣告隱含維度矩陣由預先建立。

7.根據權利要求6所述的一種基于行人主動感知的智慧社區廣告精準投放方法，其特征在于，所述廣告推薦系統的訓練過程具體為，采集社區內人員對已接受到的廣告的評分信息，作為訓練數據，載入所述廣告推薦系統中進行訓練，所述廣告推薦系統采用矩陣分解的方式，在訓練過程中優化用戶隱含維度矩陣和廣告隱含維度矩陣的參數。

8.根據權利要求1所述的一種基于行人主動感知的智慧社區廣告精準投放方法，其特征在于，所述廣告投放步驟還包括，若未檢測到行人或檢測失敗，則播放曝光類廣告。

9.根據權利要求1所述的一種基于行人主動感知的智慧社區廣告精準投放方法，其特征在于，臉部姿態角檢測步驟中，所述行人臉部與攝像頭的位姿的識別過程具體為，

通過MTCNN網絡從行人圖像中進行人臉檢測，并獲取面部特征點在行人圖像中的位置坐標，基于預設的六特征點面部三維模型，通過仿射變換確定面部旋轉矢量，并轉化為歐拉角，從而確定行人臉部與攝像頭的位姿。

10.一種基于行人主動感知的智慧社區廣告精準投放裝置，其特征在于，包括存儲器和處理器，所述存儲器存儲有計算機程序，處理器調用所述計算機程序執行如權利要求1～9任一所述的方法的步驟。