[發明專利]一種基于壓感和視覺融合的無人售貨系統

在審

• 申請號: 201910162375.0
• 申請日: 2019-03-05
• 公開（公告）號: CN110096946A
• 公開（公告）日: 2019-08-06
• 發明（設計）人: 陳警;李佗;張守建
• 申請（專利權）人: 武漢摩小超科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G07F9/02
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發明的一種基于壓感和視覺融合的無人銷售系統，通過采用壓力傳感器可以實時監控柜體內每個承載盒內的重力數據，并根據所有壓力傳感器獲取的重力數據變化，一方面可以判斷識別客戶選擇的商品質量和數量，另一方面，還可以通過每個承載盒內壓力變化，以判斷顧客的購物行為；同時，本發明還利用攝像頭采集客戶選擇商品的圖片信息，通過基于視覺的商品識別模塊，可以判斷客戶的選擇商品。與現有技術相比較，本發明的三個識別過程完美融合，極大提升商品識別準確度；以壓力識別為主，識別速度快，效率高；以視覺識別為輔，提升準確度和安全系數；以購物行為識別為補充手段，進一步加強識別準確度和安全系數；不用打標簽，制造流程簡單，成本低廉。

技術領域

本發明涉及自動售貨技術領域，更具體地，涉及一種基于壓感和視覺融合的無人售貨系統。

背景技術

目前的無人售貨柜有以下幾種：

第一種是基于RFID的無人售貨柜，這種無人售貨柜的基本原理是在商品上添加RFID射頻標簽，在售貨機內配置射頻讀取裝置，通過客戶拿取商品時識別RFID標簽來區分購買的商品。

第二種是基于視覺識別技術的無人售貨柜，這種技術是通過24小時不間斷的攝像來采集圖片，然后從圖片中分析出客戶所購買的商品。

第三種是基于重力感應來識別商品的無人售貨柜，這種技術是通過壓力感應器感應貨架上貨物的重量變化，以此判斷客戶所購買商品的技術。

基于RFID的無人零售柜需要在每個商品上添加RFID射頻標簽。首先RFID標簽的成本是比較高的，這樣就增加了硬件成本，而且添加標簽這個步驟作為一道不可或缺的程序，也會增加工業成本和人工成本。而且RFID標簽容易損壞，一旦損壞就無法正常識別商品，這樣不僅會造成經濟損失，更會影響客戶的購物體驗。而且對于部分商品，例如盒裝食品，客戶完全可以打開盒子拿走里面的食品，把貼了RFID標簽的盒子留在里面，針對這種惡意行為，基于RFID的無人售貨柜顯得無能為力。

基于視覺識別的無人售貨柜的主要缺陷在于視覺識別的速度比較慢、準確率比較低，同時此技術對商品的大小、擺放、高度以及光照等環境條件均有較嚴格的限制，支持商品的品類也受限。

基于重力傳感器的無人售貨柜主要缺點在于等量商品無法識別，盡管不同商品出現等量的情況很小，但是也無法排除，而且對重力精度也有很高的要求。

針對上述的技術問題，急需發明一種無人售貨系統以解決上述的技術問題。

發明內容

本發明提供一種產品結構簡單、識別速度快且精準的基于壓感和視覺融合的無人售貨系統及其售貨方法，以解決上無人售貨柜中產品包裝復雜且成本高、以及無人售貨柜產品識別速度和精度低的技術問題。

根據本發明的一個方面，提供一種基于壓感和視覺融合的無人售貨系統，包括：

柜體，用于容納待銷售商品，其該柜體內設有展示柜，所述展示柜上設有多個承載盒，待銷售商品裝設在所述承載盒內；

攝像頭，用于采集銷售商品的圖像數據，安裝在所述柜體的頂部；

壓力傳感器，用于采集每個承載盒內的壓力變化，裝設在所述承載盒底部；

控制器，用于進行產品識別判斷，分別于所述攝像頭和壓力傳感器相連，且所述控制器包括基于壓感的商品識別模塊、基于壓感的行為分析模塊和基于視覺的商品識別模塊，

所述基于壓感的商品識別模塊，用于根據展示柜內總的壓力數據變化以判斷客戶選擇商品；

所述基于壓感的行為分析模塊，用于根據每個承載盒內壓力數據的變化，以判斷客戶的購物行為；

所述基于視覺的商品識別模塊，用于根據攝像頭采集的數據以分析客戶選擇商品。