[發明專利]一種商品識別方法、無人售貨機及計算機可讀存儲介質

有效

• 申請號: 201810696427.8
• 申請日: 2018-06-29
• 公開（公告）號: CN109003390B
• 公開（公告）日: 2021-08-10
• 發明（設計）人: 林麗梅
• 申請（專利權）人: 深圳和而泰數據資源與云技術有限公司
• 主分類號: G07F11/00
• 分類號: G07F11/00;G06K9/00;H04N5/232
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 郝傳鑫;熊永強

1.一種商品識別方法，其特征在于，所述方法應用于無人售貨機，包括：

當檢測到所述無人售貨機的門打開時，通過攝像頭采集所述無人售貨機內的視頻數據；

對所述視頻數據中每幀圖像與背景圖像進行差分運算，獲得差分圖像；

對所述差分圖像進行二值化處理，獲得二值差分圖像；

對所述二值差分圖像進行邊緣檢測，獲得輪廓面積；

從所述視頻數據中選取所述輪廓面積大于閾值對應的圖像為變動幀圖像；

通過訓練的目標物體檢測模型識別所述變動幀圖像包括的商品，獲得圖像商品的種類、數量和位置；

從所述圖像商品中選取位置高于最高位置的商品為被用戶取走的商品，所述最高位置是所述訓練的目標物體檢測模型識別的背景圖像中商品的位置中的最高位置，所述背景圖像是所述無人售貨機的門打開前通過所述攝像頭采集的所述無人售貨機內的圖像；

根據所述圖像商品的種類和數量確定所述被用戶取走的商品的種類和數量。

2.根據權利要求1所述的方法，其特征在于，所述方法還包括：

將所述背景圖像轉換為灰度圖像，獲得灰度背景圖像；

對所述灰度背景圖像進行高斯平滑處理，獲得平滑背景圖像；

所述通過訓練的目標物體檢測模型識別所述視頻數據包括的商品，獲得圖像商品的種類、數量和位置還包括：

將所述視頻數據中每幀圖像轉換為灰度圖像，獲得灰度視頻數據；

對所述灰度視頻數據進行高斯平滑處理，獲得平滑視頻數據；

所述對所述視頻數據中每幀圖像與背景圖像進行差分運算，獲得差分圖像包括：

對所述平滑視頻數據中每幀圖像與所述平滑背景圖像進行差分運算，獲得差分圖像。

3.根據權利要求2所述的方法，其特征在于，所述通過訓練的目標物體檢測模型識別所述視頻數據包括的商品，獲得圖像商品的種類、數量和位置還包括：

對所述二值差分圖像進行膨脹腐蝕處理，獲得處理差分圖像；

所述對所述二值差分圖像進行邊緣檢測，獲得輪廓面積包括：

對所述處理差分圖像進行邊緣檢測，獲得輪廓面積。

4.根據權利要求1所述的方法，其特征在于，所述方法還包括：

采集所有商品中每種商品不同角度和不同距離的商品圖像；

標注所述商品圖像中每張圖像中商品的位置和種類，獲得標注信息；

使用所述商品圖像和所述標注信息訓練目標物體檢測模型，獲得訓練的目標物體檢測模型。

5.根據權利要求4所述的方法，其特征在于，所述方法還包括：

將所述商品圖像轉換為設定像素的圖像，獲得轉換圖像；

所述使用所述商品圖像和所述標注信息訓練目標物體檢測模型，獲得訓練的目標物體檢測模型包括：

使用所述轉換圖像和所述標注信息訓練目標物體檢測模型，獲得訓練的目標物體檢測模型。

6.根據權利要求5所述的方法，其特征在于，所述通過訓練的目標物體檢測模型識別所述視頻數據包括的商品，獲得圖像商品的種類、數量和位置包括：

將所述視頻數據中的每幀圖像轉換為所述設定像素的圖像，獲得設定視頻數據；

通過訓練的目標物體檢測模型識別所述設定視頻數據包括的商品，獲得圖像商品的種類、數量和位置。

7.根據權利要求1-6任一項所述的方法，其特征在于，所述方法還包括：

當檢測到通過包括所述無人售貨機的標識的二維碼與電子設備建立連接時，打開所述無人售貨機的門鎖。

8.根據權利要求7所述的方法，其特征在于，當所述被用戶取走的商品的數量大于0時，所述方法還包括：

根據所述被用戶取走的商品的種類和數量計算所述被用戶取走的商品的商品價格；

通過所述電子設備扣除所述商品價格金額。

9.根據權利要求8所述的方法，其特征在于，所述方法還包括：

向所述電子設備發送包括所述商品價格金額的支付信息。