[發明專利]一種基于圖像識別技術的購物手推車及其識別方法

有效

• 申請號: 201810421153.1
• 申請日: 2018-05-04
• 公開（公告）號: CN108960038B
• 公開（公告）日: 2020-11-10
• 發明（設計）人: 郭怡適;黃耀鴻;王芹;陳鵬
• 申請（專利權）人: 廣州圖匠數據科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06Q30/02;H04N7/18
• 代理公司: 廣州嘉權專利商標事務所有限公司 44205
• 代理人: 胡輝

本發明公開了一種基于圖像識別技術的購物手推車及其識別方法，包括有：視覺模塊，用于獲取購物手推車側面的貨架圖像以及購物手推車內部的商品圖像；感知模塊，用于檢測購物手推車內的商品變化，并在檢測到變化時啟動視覺模塊；識別模塊，用于對貨架圖像以及商品圖像進行識別，獲取相應的商品信息。本發明通過視覺模塊獲取手推車側面的貨架圖像以及購物手推車內部的商品圖像，同時通過感知模塊觸發視覺模塊，對顧客從貨架取出商品放入購物車行為的捕捉，實現對貨架的全面實時監測，實現高效率的貨架核查要求，利于貨架陳列優化。本發明作為一種基于圖像識別技術的購物手推車及其識別方法可廣泛應用于圖像識別領域。

技術領域

本發明涉及圖像識別領域，尤其是一種基于圖像識別技術的購物手推車及其識別方法。

背景技術

隨著新零售概念的興起，零售行業正面臨著劇變。無論是零售商還是品牌商，對于成本效率的控制需求日益提高，如何對貨架進行全方位的審計，是企業存在已久的問題；而另外如何最大限度地利用現有技術提升消費者體驗，也是零售行業上下游都一直在探索的問題。

零售商想要了解門店內的標準陳列執行情況，進行陳列檢查、缺貨檢查和價簽檢查，同時也想對購物行為進行跟蹤，目前的解決方法如下：

1、門店人員在貨架前進行數據統計，即在現場人工統計出相關貨架上商品的掛牌價格情況，工作完成后將信息統計匯總并上交，門店顧客線下的購物行為還沒辦法采集；

2、門店人員通過攝像頭拍照采集其圖片信息，采集完成后在圖片中記錄所需統計的商品的核查信息等，工作完成后將信息統計匯總并上交。

然而目前的解決方法中均采用固定攝像頭或人力實現采集工作，例如一種基于圖像識別技術的貨架識別方法(CN107045641A)，對于冷門區域和人流量大的區域，難以采集到高質量圖片，工作效率低，難以把控質量。

發明內容

為了解決上述技術問題，本發明的目的是：提供一種基于圖像識別技術實現對貨架和購物車內部進行商品信息獲取，便于自動核查、數據采集和優化陳列的購物手推車。

為了解決上述技術問題，本發明的另一目的是：提供一種基于圖像識別購物手推車實現對貨架和購物車內部進行商品信息獲取，便于自動核查、數據采集和優化陳列的識別方法。

本發明所采用的技術方案是：一種基于圖像識別技術的購物手推車，包括有

視覺模塊，用于獲取購物手推車側面的貨架圖像以及購物手推車內部的商品圖像；

感知模塊，用于檢測購物手推車內的商品變化，并在檢測到變化時啟動視覺模塊；

識別模塊，用于對貨架圖像以及商品圖像進行識別，獲取相應的商品信息。

進一步，所述視覺模塊還用于獲取購物手推車的用戶的圖像，所述識別模塊還用于對上述用戶的圖像進行識別并獲取用戶的身份信息。

進一步，所述視覺模塊包括有：

錨點檢測子模塊，用于根據錨點標記訓練出的錨點檢測模型，對購物手推車側面的貨架圖像和購物手推車內部的商品圖像進行錨點檢測；

圖像拼接子模塊，用于根據錨點檢測子模塊檢測出的錨點對購物手推車側面的貨架圖像和購物手推車內部的商品圖像分別進行拼接。

進一步，所述識別模塊采用深度學習模塊對輸入圖像中的商品信息進行識別。

進一步，還包括有檢測分析模塊，用于根據識別模塊獲取的商品信息檢測貨架陳列狀態和/或分析用戶購物行為。

本發明所采用的另一技術方案是：一種基于圖像識別技術購物手推車的識別方法，包括有以下步驟：

感知模塊檢測購物手推車內的商品變化，并在檢測到變化時啟動視覺模塊；