[發明專利]一種基于圖像識別的智能售貨柜商品管理方法及系統

有效

• 申請號: 201810246430.X
• 申請日: 2018-03-23
• 公開（公告）號: CN108491799B
• 公開（公告）日: 2022-04-01
• 發明（設計）人: 戴劍彬;王晨曦;周佳祥
• 申請（專利權）人: 海深科技（寧波）有限公司
• 主分類號: G06V20/00
• 分類號: G06V20/00;G06V10/774;G06V10/764;G06V10/74;G06V10/82;G06K9/62;G06Q30/02;G07F11/00;G07F9/02
• 代理公司: 上海碩力知識產權代理事務所(普通合伙) 31251
• 代理人: 王法男

本發明提供了一種基于圖像識別的智能售貨柜商品管理方法及系統，其中方法步驟S130根據購買結束指令，獲取被購后的當前商品分布圖；步驟S200根據所述被購后的當前商品分布圖以及特征庫，統計得到被購后的當前商品信息列表；步驟S300將所述被購后的當前商品信息列表與被購前的初始商品信息列表進行比對，并根據比對結果統計得到已被購買商品信息；步驟S400根據所述已被購買商品信息，獲取對應金額的貨款。系統包括指令獲取模塊、圖像獲取模塊、商品統計模塊、商品比對模塊、購買統計模塊、貨款獲取模塊。本發明通過圖像識別來統計售貨柜中的商品信息，實現自動并準確統計客戶實際購買詳情，從而減少了商品的貨損率，降低了經營成本損耗的目的。

技術領域

本發明涉及售貨柜技術領域，尤指一種基于圖像識別的智能售貨柜商品管 理方法及系統。

背景技術

現有的無人售貨柜主要有兩種技術路線。一種是基于二維碼的移動互聯網 路線，采用的技術方案是用戶手機掃描打開柜門，取走所需商品，然后在商品 頁面自主勾選購買的商品和數量，商品管理系統根據上述信息進行結賬收款。 這個方案技術上的缺點是系統不能準確獲知用戶實際購買的商品，也無法準確 判斷是否需要補貨。另一種模式，是基于RFID的物聯網路線。該方案要求售貨 柜安裝RFID掃描系統，貨柜上的每個商品都必須貼有RFID芯片，利用RFID技 術實現商品管理系統。該方案最大的技術缺點是RFID技術受液體和金屬的影響 比較大，很難實現準確統計。

針對上述情況，本申請提供了一種解決以上技術問題的技術方案。

發明內容

本發明的目的是提供一種基于圖像識別的智能售貨柜商品管理方法及系 統，通過圖像識別來統計售貨柜中的商品信息，實現自動并準確統計客戶實際 購買詳情，從而減少了商品的貨損率，降低了經營成本損耗。

本發明提供的技術方案如下：

一種基于圖像識別的智能售貨柜商品管理方法，包括：步驟S130根據購 買結束指令，獲取被購后的當前商品分布圖；步驟S200根據所述被購后的當 前商品分布圖以及特征庫，統計得到被購后的當前商品信息列表；步驟S300 將所述被購后的當前商品信息列表與被購前的初始商品信息列表進行比對，并 根據比對結果統計得到已被購買商品信息；步驟S400根據所述已被購買商品 信息，獲取對應金額的貨款。

優選的，步驟S130之前還包括：步驟S010獲取每一件待銷售樣品的若干 樣本圖像；步驟S020對每一件所述樣品的若干所述樣本圖像標注屬性；步驟 S030采用深度學習法對每一件所述樣品的若干所述樣本圖像中的一部分所述 樣本圖像進行訓練；步驟S040根據訓練結果，更新第一算法模型以及第二算 法模型；步驟S050根據所述第一算法模型以及所述第二算法模型，對每一件 所述樣品的若干所述樣本圖像中的另一部分所述樣本圖像進行測試驗證，提取 每一件所述樣品對應的樣品圖像特征；步驟S060根據每一件所述樣品的所述 屬性、所述樣品圖像特征，建立特征庫。

優選的，步驟S200具體包括：步驟S210根據所述第一算法模型，對所述 被購后的當前商品分布圖進行解析識別，分類得到所述被購后的當前商品分布 圖中若干當前商品的商品類型；步驟S220根據所述第二算法模型，對所述被 購后的當前商品分布圖進行解析識別，提取所述被購后的當前商品分布圖中所 述若干當前商品的圖像特征；步驟S230根據若干所述當前商品的所述商品類 型，將所述若干當前商品的所述圖像特征與所述特征庫中的所述樣品圖像特征 進行比對，得到所述若干當前商品的所述商品信息；步驟S240根據所述若干 當前商品的所述商品信息，得到被購后的當前商品信息列表。

優選的，步驟S130之前還包括：步驟S110根據登錄驗證指令，解鎖所述 售貨柜的柜門；步驟S120當檢測到所述售貨柜的柜門重新鎖定后，生成所述 購買結束指令。

優選的，步驟S400之后還包括：步驟S500將所述被購后的當前商品信息 列表更新設置為所述被購前的初始商品信息列表。