[發明專利]一種基于商品圖像識別的智能售賣機控制方法及系統

在審

• 申請號: 201910872072.8
• 申請日: 2019-09-16
• 公開（公告）號: CN112507762A
• 公開（公告）日: 2021-03-16
• 發明（設計）人: 葉朝虹;陳翀;宋德超;唐杰
• 申請（專利權）人: 珠海格力電器股份有限公司;珠海聯云科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/20;G06K9/62;G06N3/04;G06N3/08;G07F11/00
• 代理公司: 北京聿宏知識產權代理有限公司 11372
• 代理人: 吳大建;何嬌

本申請提供了一種基于商品圖像識別的智能售賣機控制方法，包括：采集商品架圖像并顯示所采集的商品架圖像，所述商品架圖像能夠被拖動、旋轉和縮放以便于查看所述商品架中的商品；當檢測到所述商品架圖像中的商品被選中時，采集所選中商品的圖像，并利用深度卷積網絡訓練方法對所采集的商品圖像進行識別；判斷識別出的商品是否為所售賣商品；若是，則顯示所選中商品的商品標簽；若否，則顯示提示信息。本申請的識別方式更加智能化、自動化，識別范圍也更加廣泛，使交易更加快捷方便。

技術領域

本發明涉及自動售賣設備技術領域，具體涉及一種基于商品圖像識別的智能售賣機控制方法及系統。

背景技術

無人售賣機在市場上有了越來越廣泛的應用，目前市場的無人售賣機大多基于電子標簽或顧客人工輸入等方式進行商品的識別。基于電子標簽時需要為每件商品添加電子標簽，然后通過射頻信號自動識別目標對象并獲取相關數據。此種方法工作量大，且容易出錯。基于顧客人工輸入時，需要用戶輸入欲購商品所在的貨道號碼，此種方法需要用戶輸入連續的數字，容易出錯。

發明內容

針對上述現有技術中的問題，本申請提出了一種基于商品圖像識別的智能售賣機控制方法及系統，用于解決上述技術問題。

第一方面，本申請提供一種基于商品圖像識別的智能售賣機控制方法，包括以下步驟：

S10：采集商品架圖像并顯示所采集的商品架圖像，所述商品架圖像能夠被拖動和/或旋轉和/或縮放以便于查看所述商品架中的商品；

S20：當檢測到所述商品架圖像中的商品被選中時，采集所選中商品的圖像，并對所采集的商品圖像進行識別；

S30：判斷識別出的商品是否為所售賣商品；

若是，則顯示所選中商品的商品標簽；若否，則顯示提示信息；

其中，步驟S20中，對所采集的商品圖像進行識別包括：生成所售賣商品的圖像，并利用深度卷積網絡訓練方法對所售賣商品的圖像進行訓練，獲取訓練好的模型參數，利用所述訓練好的模型參數對所采集的商品圖像進行識別。

根據第一方面的一個實施例中，步驟S10中，所述商品架圖像為商品架立體圖和/或商品架正面圖和/或商品架視頻。

在根據第一方面的一個實施方式中，所述商品標簽包括商品名稱和商品價格。

在根據第一方面的一個實施方式中，步驟S20中，通過以下方式生成所售賣商品的圖像：

通過人機交互的方式生成所售賣商品的圖像，或者通過掃描所售賣商品的方式生成所售賣商品的圖像。

在根據第一方面的一個實施方式中，在所識別的商品是售賣商品時，還包括步驟：

S40：顯示可選的支付方式；

S50：當檢測到任意一種支付方式被選中時，執行支付流程；

S60：當判定支付成功時，控制被選中的商品出貨。

在根據第一方面的一個實施方式中，在所識別的商品不是售賣商品并顯示提示信息后，則顯示步驟S10中所采集的商品架圖像。

第二方面，本申請提供一種基于商品圖像識別的智能售賣機控制系統，包括：

顯示模塊，用于顯示商品架圖像，并用于顯示商品的商品標簽，以及提示信息；

圖像采集裝置，用于采集商品架圖像和采集被選中商品的圖像；

識別模塊，用于利用深度卷積網絡訓練方法對所售賣商品的圖像進行訓練，以獲取訓練好的模型參數，并根據訓練好的模型參數識別所選中的商品；

判斷模塊，用于判斷所識別出的商品是否為售賣商品；