[發明專利]基于增強現實的圖像標注方法、系統、設備及存儲介質

在審

• 申請號: 201811408143.0
• 申請日: 2018-11-23
• 公開（公告）號: CN109740425A
• 公開（公告）日: 2019-05-10
• 發明（設計）人: 胡曉俊;柯嚴;嚴治慶
• 申請（專利權）人: 上海擴博智能技術有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發明提供的基于增強現實的圖像標注方法、系統、設備及存儲介質，包括：采集第一視頻數據，將第一視頻數據轉化為多張時間上連續的單幀圖像，進而根據多張單幀圖像生成虛擬圖像場景；采集第二視頻數據，通過預設置的單元識別模型對第二視頻數據中的待標注單幀圖像進行單元識別，識別出多個商品區域并將商品區域標記出；把標記出多個商品區域的單幀圖像與虛擬圖像場景中的對應區域進行替換。本發明能夠根據智能手機上的攝像頭采集的第一視頻數據建立虛擬圖像場景，并進而將單元識別出的商品區域補充至虛擬圖像場景中，實現能夠在虛擬圖像場景中對商品區域進行標注，避免了對同一商品區域的重復標注，提高了商品區域標注和訓練圖像的生成效率。

技術領域

本發明涉及新零售，具體地，涉及一種基于增強現實的圖像標注方法、系統、設備及存儲介質。

背景技術

雖然線上零售一段時期以來替代了傳統零售的功能，但從兩大電商平臺，天貓和京東的獲客成本可以看出，電商的線上流量紅利見頂；與此同時線下邊際獲客成本幾乎不變，且實體零售進入整改關鍵期，因此導致的線下渠道價值正面臨重估。

移動支付等新技術開拓了線下場景智能終端的普及，以及由此帶來的移動支付、大數據、虛擬現實等技術革新，進一步開拓了線下場景和消費社交，讓消費不再受時間和空間制約。

現在很多企業正以互聯網為依托，通過運用大數據、人工智能等先進技術手段，對商品的生產、流通與銷售過程進行升級改造，進而重塑業態結構與生態圈，并對線上服務、線下體驗以及現代物流進行深度融合的零售新模式。

為了提高用戶的線下購物體驗和購物效率，在該零售新模式中需要對線下店中的商品通過移動端進行識別?，F有技術中對該識別模型進行訓練時所用的訓練圖像，一般是采集大量的圖像然后由人員對感興趣區域進行逐個框選，然后標注相應的框選出區域的商品類別。當該人員需要處理過多的圖片時，用戶需要逐一框選，操作極為繁瑣，同時因為頻繁的框選操作以及圖像拍攝清晰度不夠時可能使的用戶出現誤操作，時間消耗較長且花費大量的勞動力。

發明內容

針對現有技術中的缺陷，本發明的目的是提供一種基于增強現實的圖像標注方法、系統、設備及存儲介質。

根據本發明提供的基于增強現實的圖像標注方法，用于通過智能手機對貨架上的商品圖像進行標注，包括如下步驟：

步驟S1：采集第一視頻數據，將所述第一視頻數據轉化為多張時間上連續的單幀圖像，進而根據所述多張所述單幀圖像生成虛擬圖像場景；

步驟S2：采集第二視頻數據，通過預設置的單元識別模型對第二視頻數據中的待標記單幀圖像進行單元識別，識別出多個商品區域并將所述商品區域標記出；

步驟S3：把所述標記出多個商品區域的單幀圖像與所述虛擬圖像場景中的對應區域進行替換。

優選地，所述步驟S2包括如下步驟：

步驟S201：采集第二視頻數據，在所述第二視頻數據提取出多張時間上連續的待標注單幀圖像；

步驟S202：通過所述單元識別模型對一所述待標注單幀圖像進行單元識別，識別出多個商品區域；

步驟S203：通過標記框將識別出的所述商品區域標記出。

優選地，所述步驟S201包括如下步驟：

步驟S2011：采集第二視頻數據，在所述第二視頻數據提取出多張時間上連續的待標注單幀圖像；

步驟S2012：順次提取時間上連續的兩幀待標注單幀圖像的特征點，根據所述特征點計算時間上連續的兩幀待標注單幀圖像之間的位移；

步驟S2013：判斷所述位移是否小于預設定的位移閾值，當所述位移小于預設定的位移閾值時，則觸發步驟S202。