[發明專利]一種基于圖像識別技術的購物手推車及其識別方法

有效

• 申請號: 201810421153.1
• 申請日: 2018-05-04
• 公開（公告）號: CN108960038B
• 公開（公告）日: 2020-11-10
• 發明（設計）人: 郭怡適;黃耀鴻;王芹;陳鵬
• 申請（專利權）人: 廣州圖匠數據科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06Q30/02;H04N7/18
• 代理公司: 廣州嘉權專利商標事務所有限公司 44205
• 代理人: 胡輝

1.一種基于圖像識別技術的購物手推車，其特征在于：包括有

視覺模塊，用于獲取購物手推車側面的貨架圖像以及購物手推車內部的商品圖像；

感知模塊，用于檢測購物手推車內的商品變化，并在檢測到變化時啟動視覺模塊；

識別模塊，用于對貨架圖像以及商品圖像進行識別，獲取貨架上和購物車中的商品信息；

所述商品信息包括商品、價格標簽和促銷信息。

2.根據權利要求1所述的一種基于圖像識別技術的購物手推車，其特征在于：所述視覺模塊還用于獲取購物手推車的用戶的圖像，所述識別模塊還用于對上述用戶的圖像進行識別并獲取用戶的身份信息。

3.根據權利要求1或2所述的一種基于圖像識別技術的購物手推車，其特征在于，所述視覺模塊包括有：

錨點檢測子模塊，用于根據錨點標記訓練出的錨點檢測模型，對購物手推車側面的貨架圖像和購物手推車內部的商品圖像進行錨點檢測；

圖像拼接子模塊，用于根據錨點檢測子模塊檢測出的錨點對購物手推車側面的貨架圖像和購物手推車內部的商品圖像分別進行拼接。

4.根據權利要求1所述的一種基于圖像識別技術的購物手推車，其特征在于：所述識別模塊采用深度學習模塊對輸入圖像中的商品信息進行識別。

5.根據權利要求1所述的一種基于圖像識別技術的購物手推車，其特征在于：還包括有檢測分析模塊，用于根據識別模塊獲取的商品信息檢測貨架陳列狀態和/或分析用戶購物行為。

6.一種基于圖像識別技術購物手推車的識別方法，其特征在于，包括有以下步驟：

感知模塊檢測購物手推車內的商品變化，并在檢測到變化時啟動視覺模塊；

視覺模塊獲取購物手推車側面的貨架圖像以及購物手推車內部的商品圖像；

識別模塊對購物手推車側面的貨架圖像以及購物手推車內部的商品圖像進行識別，獲取貨架上和購物車中的商品信息；

所述商品信息包括商品、價格標簽和促銷信息。

7.根據權利要求6所述的一種基于圖像識別技術購物手推車的識別方法，其特征在于：視覺模塊還獲取購物手推車的用戶的圖像；識別模塊還對上述用戶的圖像進行識別并獲取用戶的身份信息。

8.根據權利要求6或7所述的一種基于圖像識別技術購物手推車的識別方法，其特征在于：所述視覺模塊獲取購物手推車側面的貨架圖像以及購物手推車內部的商品圖像這一步驟，具體為：

根據錨點標記訓練出的錨點檢測模型，對購物手推車側面的貨架圖像和購物手推車內部的商品圖像進行錨點檢測；

根據錨點檢測子模塊檢測出的錨點對購物手推車側面的貨架圖像和購物手推車內部的商品圖像分別進行拼接，得到拼接后的購物手推車側面的貨架圖像和拼接后的購物手推車內部的商品圖像。

9.根據權利要求6所述的一種基于圖像識別技術購物手推車的識別方法，其特征在于：所述識別模塊對購物手推車側面的貨架圖像以及購物手推車內部的商品圖像進行識別這一步驟，具體為：識別模塊采用深度學習模塊對輸入的購物手推車側面的貨架圖像以及購物手推車內部的商品圖像中的商品信息進行識別。

10.根據權利要求6所述的一種基于圖像識別技術購物手推車的識別方法，其特征在于，還包括有檢測分析步驟：根據識別模塊獲取的商品信息檢測貨架陳列狀態和/或分析用戶購物行為。