[發(fā)明專利]基于視覺和感應(yīng)器的智能售貨機(jī)控制系統(tǒng)及控制方法

在審

• 申請(qǐng)?zhí)枺?/td>: 201811030473.0
• 申請(qǐng)日: 2018-08-30
• 公開（公告）號(hào): CN110874883A
• 公開（公告）日: 2020-03-10
• 發(fā)明（設(shè)計(jì)）人: 林捷;韓鑫;郭曉東
• 申請(qǐng)（專利權(quán)）人: 上海霖罕信息科技有限公司
• 主分類號(hào): G07F11/00
• 分類號(hào): G07F11/00;G06F21/32
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.基于視覺和感應(yīng)器的智能售貨機(jī)控制系統(tǒng)，其特征在于，包括以下模塊：

開門模塊，開門模塊用于在用戶準(zhǔn)備購物的時(shí)刻，捕捉用戶特征，進(jìn)行用戶身份識(shí)別，并將用戶身份信息傳給后續(xù)環(huán)節(jié)使用；

靜態(tài)識(shí)別模塊，設(shè)置在智能售貨機(jī)的每一個(gè)層板的頂部，連接有攝像頭，實(shí)時(shí)對(duì)當(dāng)前層板的商品移動(dòng)進(jìn)行監(jiān)控；每個(gè)層板均配備了重量感應(yīng)器，提供本層商品重量變化的信息；

動(dòng)態(tài)識(shí)別模塊，安裝在智能售貨機(jī)的頂部，連接有攝像頭，對(duì)用戶開門、關(guān)門時(shí)手部的動(dòng)作進(jìn)行實(shí)時(shí)的跟蹤和識(shí)別；

關(guān)門模塊，在用戶關(guān)門之后，關(guān)門模塊用于匯總靜態(tài)識(shí)別模塊和動(dòng)態(tài)識(shí)別模塊的信息，生成相應(yīng)的購物清單，并完成支付；

中控模塊，用于收集和存儲(chǔ)各個(gè)感應(yīng)器的信號(hào)，包括各個(gè)攝像頭收集的視頻信息和重量感應(yīng)器收集的重量變化信息；匯總各個(gè)感應(yīng)器信息，驅(qū)動(dòng)有關(guān)的算法模塊，獲得用戶信息和智能貨柜內(nèi)部的商品變化情況；控制開門、關(guān)門動(dòng)作。

2.根據(jù)權(quán)利要求1所述的基于視覺和感應(yīng)器的智能售貨機(jī)控制系統(tǒng)，其特征在于，所述的開門模塊，負(fù)責(zé)在用戶準(zhǔn)備購物的時(shí)刻，捕捉用戶的臉部特征，判斷用戶是否為新客戶，如果是新客戶，則提示用戶完成注冊(cè)動(dòng)作，然后并打開智能售貨機(jī)的門，如果是已經(jīng)注冊(cè)的用戶，則感應(yīng)用戶手部動(dòng)作，并開門。

3.根據(jù)權(quán)利要求1所述的基于視覺和感應(yīng)器的智能售貨機(jī)控制系統(tǒng)，其特征在于，所述的靜態(tài)識(shí)別模塊，定期捕捉層板的圖片，匯總各層板圖片，根據(jù)圖片信息計(jì)算個(gè)層板的商品信息；同時(shí)定期采取重量感應(yīng)器數(shù)據(jù)，匯總隔層板重量信號(hào)，根據(jù)重量信號(hào)計(jì)算個(gè)層板商品信息；兩種商品信息計(jì)算結(jié)果進(jìn)行匹配對(duì)比，如果匹配則生成商品清單給中空模塊，如果不匹配則進(jìn)行報(bào)錯(cuò)處理。

4.根據(jù)權(quán)利要求1所述的基于視覺和感應(yīng)器的智能售貨機(jī)控制系統(tǒng)，其特征在于，所述的動(dòng)態(tài)識(shí)別模塊定期的捕捉用戶手部動(dòng)作圖片，如果用戶有手部動(dòng)作，則開始動(dòng)態(tài)商品識(shí)別，如果沒有，等待下次捕捉定期的捕捉用戶手部動(dòng)作圖片。

5.根據(jù)權(quán)利要求1所述的基于視覺和感應(yīng)器的智能售貨機(jī)控制系統(tǒng)，其特征在于，在用戶關(guān)上智能售貨機(jī)后，所述的關(guān)門模塊負(fù)責(zé)匯總靜態(tài)和動(dòng)態(tài)識(shí)別模塊的信息，生成合計(jì)的購物清單；所述的商品清單的生成是靜態(tài)動(dòng)態(tài)商品清單和動(dòng)態(tài)商品清單的“與”操作，即兩個(gè)清單相加，同時(shí)重合部分，只計(jì)算一次；然后，根據(jù)之前獲得的用戶信息，生成相應(yīng)的用戶訂單，并提交相應(yīng)的支付系統(tǒng)完成支付。

6.基于視覺和感應(yīng)器的智能售貨機(jī)控制系統(tǒng)的控制方法，其特征在于，包括以下步驟：

(1)負(fù)責(zé)在用戶準(zhǔn)備購物的時(shí)刻，捕捉用戶的臉部特征，判斷用戶是否為新客戶，如果是新客戶，則提示用戶完成注冊(cè)動(dòng)作，然后并打開智能售貨機(jī)的門，如果是已經(jīng)注冊(cè)的用戶，則感應(yīng)用戶手部動(dòng)作，并開門；

(2)定期的捕捉用戶手部動(dòng)作圖片，如果用戶有手部動(dòng)作，則開始動(dòng)態(tài)商品識(shí)別，如果沒有，等待下次捕捉定期的捕捉用戶手部動(dòng)作圖片；

(3)在用戶關(guān)上智能售貨機(jī)后，定期捕捉層板的圖片，匯總各層板圖片，根據(jù)圖片信息計(jì)算個(gè)層板的商品信息；同時(shí)定期采取重量感應(yīng)器數(shù)據(jù)，匯總隔層板重量信號(hào)，根據(jù)重量信號(hào)計(jì)算個(gè)層板商品信息；兩種商品信息計(jì)算結(jié)果進(jìn)行匹配對(duì)比，如果匹配則生成商品清單，如果不匹配則進(jìn)行報(bào)錯(cuò)處理；

(4)匯總靜態(tài)和動(dòng)態(tài)識(shí)別的信息，生成合計(jì)的購物清單；所述的商品清單的生成是靜態(tài)動(dòng)態(tài)商品清單和動(dòng)態(tài)商品清單的“與”操作，即兩個(gè)清單相加，同時(shí)重合部分，只計(jì)算一次；然后，根據(jù)之前獲得的用戶信息，生成相應(yīng)的用戶訂單，并提交相應(yīng)的支付系統(tǒng)完成支付。