[發明專利]一種基于商品圖像識別的智能售賣機控制方法及系統

在審

• 申請號: 201910872072.8
• 申請日: 2019-09-16
• 公開（公告）號: CN112507762A
• 公開（公告）日: 2021-03-16
• 發明（設計）人: 葉朝虹;陳翀;宋德超;唐杰
• 申請（專利權）人: 珠海格力電器股份有限公司;珠海聯云科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/20;G06K9/62;G06N3/04;G06N3/08;G07F11/00
• 代理公司: 北京聿宏知識產權代理有限公司 11372
• 代理人: 吳大建;何嬌

1.一種基于商品圖像識別的智能售賣機控制方法，其特征在于，包括以下步驟：

S10：采集商品架圖像并顯示所采集的商品架圖像，所述商品架圖像能夠被拖動和/或旋轉和/或縮放以便于查看所述商品架圖像中的商品；

S20：當檢測到所述商品架圖像中的商品被選中時，采集所選中商品的圖像，并對所采集的商品圖像進行識別；

S30：判斷識別出的商品是否為所售賣商品；

若是，則顯示所選中商品的商品標簽；若否，則顯示提示信息；

其中，步驟S20中，對所采集的商品圖像進行識別包括：生成所售賣商品的圖像，并利用深度卷積網絡訓練方法對所售賣商品的圖像進行訓練，獲取訓練好的模型參數，利用所述訓練好的模型參數對所采集的商品圖像進行識別。

2.根據權利要求1所述的智能售賣機控制方法，其特征在于，步驟S10中，所述商品架圖像為商品架立體圖和/或商品架正面圖和/或商品架視頻。

3.根據權利要求1所述的智能售賣機控制方法，其特征在于，所述商品標簽包括商品名稱和商品價格。

4.根據權利要求1所述的智能售賣機控制方法，其特征在于，步驟S20中，通過以下方式生成所售賣商品的圖像：

通過人機交互的方式生成所售賣商品的圖像，或者通過掃描所售賣商品的方式生成所售賣商品的圖像。

5.根據權利要求1-4任一項所述的智能售賣機控制方法，其特征在于，在所識別的商品是售賣商品時，還包括步驟：

S40：顯示可選的支付方式；

S50：當檢測到任意一種支付方式被選中時，執行支付流程；

S60：當判定支付成功時，控制被選中的商品出貨。

6.根據權利要求1-4任一項所述的智能售賣機控制方法，其特征在于，在所識別的商品不是售賣商品并顯示提示信息后，則顯示步驟S10中所采集的商品架圖像。

7.一種基于商品圖像識別的智能售賣機控制系統，其特征在于，包括：

顯示模塊，用于顯示商品架圖像，并用于顯示商品的商品標簽，以及提示信息；

圖像采集裝置，用于采集商品架圖像和采集被選中商品的圖像；

識別模塊，用于利用深度卷積網絡訓練方法對所售賣商品的圖像進行訓練，以獲取訓練好的模型參數，并根據訓練好的模型參數識別所選中的商品；

判斷模塊，用于判斷所識別出的商品是否為售賣商品；

控制模塊，用于根據所述判斷模塊的判斷結果進行控制；

若判斷所識別出的商品是售賣商品，則顯示所述商品的商品標簽，若否，則顯示提示信息。

8.根據權利要求7所述的智能售賣機控制系統，其特征在于，所述識別模塊還包括存儲子模塊，用于存儲所述訓練好的模型參數。

9.根據權利要求7所述的智能售賣機控制系統，其特征在于，所述圖像采集模塊還用于采集所售賣商品的圖像。

10.一種智能售賣機，其特征在于，采用根據權利要求1-6任一項所述的智能售賣機控制方法。