[發(fā)明專利]AR智能眼鏡的應(yīng)用基于眼動追蹤技術(shù)的廣告推送方法

有效

• 申請?zhí)枺?/td>: 201810911203.4
• 申請日: 2018-08-10
• 公開（公告）號: CN108960937B
• 公開（公告）日: 2019-07-30
• 發(fā)明（設(shè)計）人: 陳濤;蔡超;郭聞浩;陳翔宇
• 申請（專利權(quán)）人: 陳濤;武漢市天蝎科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 北京金智普華知識產(chǎn)權(quán)代理有限公司 11401
• 代理人: 楊采良

1.一種AR智能眼鏡的應(yīng)用基于眼動追蹤技術(shù)的廣告推送方法，其特征在于，所述AR智能眼鏡的應(yīng)用基于眼動追蹤技術(shù)的廣告推送方法包括：

步驟一，AR眼鏡進(jìn)行眼部特征識別；

通過AR智能眼鏡上集成的眼動追蹤模塊來識別眼部虹膜特征來對用戶的身份認(rèn)證；

步驟二，通過AR智能眼鏡上集成的GPS和WiFi模塊、通信信號基站獲得用戶位置信息；

步驟三，當(dāng)用戶正常佩戴AR智能眼鏡時，人目光環(huán)顧四周，智能眼鏡計算機系統(tǒng)獲取人眼注視點坐標(biāo)，并通過算法計算獲得人眼球運動坐標(biāo)與注視點在環(huán)境中落點坐標(biāo)的映射關(guān)系；

步驟四，當(dāng)計算機識別到人眼出現(xiàn)特定的眼動行為或者生物信號時將執(zhí)行局部圖像截取計算機指令，以注視點為圓心的圓形或以注視點為中心的正方形所截取出的局部圖像、或者眼動路徑所形成的不規(guī)則多邊形；

步驟五，局部照片5G上傳云端服務(wù)器，識別圖像中的物體是否是特征數(shù)據(jù)庫內(nèi)已知產(chǎn)品類型，并判別是否滿足彈出廣告條件；在云端服務(wù)器對圖像進(jìn)行運算、語義分割處理、識別、比對，獲得相關(guān)運算結(jié)果，同時通過人工智能的機器學(xué)習(xí)處理大量的事物數(shù)據(jù)庫；如果不是已有產(chǎn)品類型不滿足廣告彈出條件，跳轉(zhuǎn)到步驟六，如果是已有產(chǎn)品類型滿足廣告彈出條件，跳轉(zhuǎn)到步驟七；

步驟六，不彈出廣告，不彈出廣告指令由服務(wù)器下傳該指令到智能眼鏡終端，智能眼鏡繼續(xù)執(zhí)行獲取下一處注視坐標(biāo)循環(huán)；再次調(diào)用AR智能眼鏡上的眼動追蹤模塊獲取人眼注視點坐標(biāo)點；

步驟七，由智能眼鏡廣告推薦系統(tǒng)判別彈出相關(guān)的廣告信息，該指令由云端服務(wù)器通過5G下傳該指令到智能眼鏡終端，廣告信息類別包括直接彈出用戶視覺所關(guān)注興趣產(chǎn)品或其他相似的興趣產(chǎn)品，直接彈出用戶視覺所關(guān)注興趣產(chǎn)品獲取方法跳轉(zhuǎn)到步驟八，其他相似的興趣產(chǎn)品信息獲取方法跳轉(zhuǎn)到步驟九；

步驟八，直接彈出所注視的興趣產(chǎn)品廣告，當(dāng)用戶所關(guān)注興趣區(qū)域中產(chǎn)品的圖片5G上傳云端與產(chǎn)品數(shù)據(jù)庫比對，兩者圖像相似度達(dá)到某一閾值時，則判斷已在產(chǎn)品數(shù)據(jù)庫中匹配到用戶視覺注視的興趣產(chǎn)品，隨即云端服務(wù)器將該產(chǎn)品相關(guān)信息5G傳送給該用戶智能眼鏡終端呈現(xiàn)該興趣產(chǎn)品相關(guān)信息；

步驟九，在云端服務(wù)器的用戶賬戶下建立個人興趣特征數(shù)據(jù)庫，計算機分析出智能眼鏡用戶獨有興趣偏好類型；

云端服務(wù)器對用戶以往的視覺注視的大量興趣事物和以往完成支付的產(chǎn)品照片進(jìn)行人工智能圖像識別，機器學(xué)習(xí)自動生成興趣偏好數(shù)據(jù)模型，獲取用戶興趣標(biāo)簽；

步驟十，在云端中央服務(wù)器中匹配相似的個人興趣偏好數(shù)據(jù)庫，把興趣偏好數(shù)據(jù)庫相似的用戶喜歡的產(chǎn)品的信息推送給用戶，產(chǎn)品信息5G回傳智能眼鏡終端；

步驟十一，在云端中央服務(wù)器數(shù)據(jù)庫中產(chǎn)品圖片與興趣偏好模型進(jìn)行對比，把與個人興趣偏好數(shù)據(jù)庫高度相似的產(chǎn)品進(jìn)行推送，產(chǎn)品信息5G回傳智能眼鏡終端；

步驟十二，AR智能眼鏡接受云端中央服務(wù)器下傳的產(chǎn)品信息，AR智能眼鏡成像顯示設(shè)備呈現(xiàn)用戶視覺所關(guān)注興趣產(chǎn)品或其他相似的興趣產(chǎn)品；并通過智能眼鏡自有交互方式對購買圖形界面的操作，進(jìn)而完成購買支付行為；

步驟四中，執(zhí)行局部圖像截取指令的條件包括：

對所注視的興趣區(qū)域產(chǎn)生-凝視時長超過閾值；

對所注視的興趣區(qū)域產(chǎn)生-回視一定的次數(shù)；

對所注視的興趣區(qū)域產(chǎn)生-人眼瞳孔的放大或者縮小；

對所注視的興趣區(qū)域產(chǎn)生-眨眼次數(shù)或眨眼行為達(dá)到預(yù)設(shè)標(biāo)準(zhǔn)；

對所注視的興趣區(qū)域產(chǎn)生-特定事物的視覺注意路徑模型；

同一時刻腦電波檢測模塊檢測出用戶對該視覺注視區(qū)域產(chǎn)生情緒波動；

同一時刻心率、血壓人體生物信息監(jiān)測模塊檢測出用戶情緒發(fā)生波動；

其他具有生物信息監(jiān)測功能模塊與眼動注視點同時作用，判別用戶對產(chǎn)品感興趣；

步驟十二中，彈出用戶視覺所關(guān)注興趣產(chǎn)品或其他相似的興趣產(chǎn)品的彈出方式包括：

在人佩戴AR智能眼鏡時，在興趣物的周圍呈現(xiàn)信息；

在人佩戴AR智能眼鏡時，在以視覺中心為圓心的圓形周圍呈現(xiàn)信息；

在人佩戴AR智能眼鏡時，AR眼鏡成像屏幕上固定的位置呈現(xiàn)信息；

或者在后期以廣告彈窗的形式進(jìn)行廣告信息推送。

2.如權(quán)利要求1所述的AR智能眼鏡的應(yīng)用基于眼動追蹤技術(shù)的廣告推送方法，其特征在于，步驟十一后，還需進(jìn)行：

步驟十三，完成支付交易，該交易產(chǎn)品圖像信息加入個人興趣特征數(shù)據(jù)庫，完善人工智能機器學(xué)習(xí)的用戶偏好特征模型。