[發明專利]商品取放識別裝置及商品取放識別方法

在審

• 申請號: 202110262710.1
• 申請日: 2021-03-11
• 公開（公告）號: CN113052020A
• 公開（公告）日: 2021-06-29
• 發明（設計）人: 盧毅;林晨寬
• 申請（專利權）人: 浙江星星冷鏈集成股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06Q30/06;G07F11/00
• 代理公司: 上海德昭知識產權代理有限公司 31204
• 代理人: 郁旦蓉;盧泓宇

1.一種商品取放識別裝置，用于對用戶在智能售貨柜中取放待售商品時拍攝得到的取放視頻進行識別，其特征在于，包括：

幀圖像分解部，將所述取放視頻分解為多個幀圖像；

商品解析部，分別從每一個所述幀圖像中解析出該幀圖像中含有的各個商品的輪廓和對應的位置信息；

輪廓判定部，基于預定輪廓變形范圍判定規則以及預定位置移動范圍判定規則，以及根據相鄰兩個所述幀圖像含有的各個所述商品的所述輪廓和所述位置信息，判定出各個所述幀圖像中各個所述輪廓之間的對應關系，并將具有該對應關系的所述輪廓所對應的所述商品作為同一所述待售商品；

移動軌跡形成部，將每個所述幀圖像中同一所述待售商品的所述位置信息按照時間順序連接形成所述待售商品的商品移動軌跡；以及

取放判定部，至少根據所述商品移動軌跡判定所述待售商品是否被所述用戶取放。

2.根據權利要求1所述的商品取放識別裝置，其特征在于：

其中，所述商品的所述輪廓為能夠框選出與所述幀圖像中該商品的圖形大小相適配的范圍框，所述位置信息為所述范圍框在所述幀圖像中的中心點坐標，

所述輪廓判定部具有：

輪廓設定單元，針對相鄰兩個所述幀圖像，將一個所述幀圖像中的各個所述輪廓設定為第一輪廓，并將另一個所述幀圖像中的各個所述輪廓設定為第二輪廓；

位置移動范圍判斷單元，根據所述第一輪廓以及所述第二輪廓的所述位置信息計算所述第一輪廓與所述第二輪廓之間的移動距離，并判斷該移動距離是否在與所述第二輪廓的邊長相對應的位置移動閾值以下；

輪廓變形范圍判斷單元，判斷所述第一輪廓的所述邊長是否在與所述第二輪廓的所述邊長相對應的輪廓變形范圍內；

對應關系判定單元，當所述第一輪廓與所述第二輪廓之間的所述移動距離在所述位置移動范圍內，并且所述第一輪廓的所述邊長在所述輪廓變形范圍內時，將所述移動距離最短的所述第一輪廓與所述第二輪廓判定為具有所述對應關系。

3.根據權利要求2所述的商品取放識別裝置，其特征在于：

其中，所述邊長為所述范圍框的寬度值以及高度值，

所述位置移動閾值為所述高度值乘以預定移動距離系數，該預定移動距離系數的取值范圍在1.3至1.7之間，

所述輪廓變形范圍為所述邊長乘以預定最小變形系數至所述邊長乘以預定最大變形系數之間，所述預定最小變形系數為0.6，所述預定最大變形系數為1.7。

4.根據權利要求1所述的商品取放識別裝置，其特征在于：

其中，所述商品的所述輪廓為能夠框選出與所述幀圖像中該商品的圖形大小相適配的范圍框，所述位置信息為所述范圍框在所述幀圖像中的中心點坐標，

所述輪廓判定部具有：

標準邊長存儲單元，存儲有與各個所述商品相對應的范圍框標準邊長；

輪廓設定單元，針對相鄰兩個所述幀圖像，將一個所述幀圖像中的各個所述輪廓設定為第一輪廓，并將另一個所述幀圖像中的各個所述輪廓設定為第二輪廓；

商品距離計算單元，根據所述第二輪廓在所述幀圖像中的邊長、對應商品的所述范圍框標準邊長以及所述攝像頭的焦距，計算得到所述商品與所述攝像頭之間的商品距離；

位置移動閾值計算單元，根據所述商品距離、所述焦距以及預定實際移動閾值計算得到位置移動閾值；

位置移動范圍判斷單元，根據所述第一輪廓以及所述第二輪廓的所述位置信息計算所述第一輪廓與所述第二輪廓之間的移動距離，并判斷該移動距離是否在所述位置移動閾值以下；

輪廓變形范圍判斷單元，判斷所述第一輪廓的所述邊長是否在與所述第二輪廓的所述邊長相對應的輪廓變形范圍內；

對應關系判定單元，當所述第一輪廓與所述第二輪廓之間的所述移動距離在所述位置移動范圍內，并且所述第一輪廓的所述邊長在所述輪廓變形范圍內時，將所述移動距離最短的所述第一輪廓與所述第二輪廓判定為具有所述對應關系。