[發明專利]基于圖像處理技術的冷柜貨架商品統計方法及系統

有效

• 申請號: 201910309036.0
• 申請日: 2019-04-17
• 公開（公告）號: CN110033452B
• 公開（公告）日: 2021-06-08
• 發明（設計）人: 王娜娜;董振興;楊敏;張二樂;張海波
• 申請（專利權）人: 北京云量互動科技有限公司
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06T5/00;G06T5/50;G06T7/136
• 代理公司: 北京晟睿智杰知識產權代理事務所(特殊普通合伙) 11603
• 代理人: 于淼

本發明公開了一種基于圖像處理技術的冷柜貨架商品統計方法及系統，涉及人工智能領域，包括：終端控制器將第一圖像和第二圖像拼接成第三圖像，云端服務器將第三圖像分割為多個第四圖像；然后對各第四圖像進行分割，計算得到冷柜中各置物隔層中第一排所擺放的第一商品總量；對冷柜中的所有置物隔層對應的第一商品總量求和，得到冷柜中第一排所擺放的第二商品總量并存入數據庫。根據圓心旋轉不變性拼接圖像，能夠減小特征點匹配誤差，使拼接得到的圖像效果更好，將拼接后的圖像分層為第四圖像，對第四圖像細化分割，能夠準確分割出各置物隔層中第一排擺放的商品，能夠提高統計效率，還能夠提高商品統計準確率，有利于提高對冷柜商品的管理質量。

技術領域

本發明涉及人工智能和數字圖像處理技術領域，更具體地，涉及一種基于圖像處理技術的冷柜貨架商品統計方法及系統。

背景技術

數字圖像處理技術是一個跨學科的領域，隨著計算機科學技術的不斷發展，圖像處理與分析逐漸形成了自己的科學體系，新的處理方法層出不窮，雖然發展歷史不長，但已經引起了社會各界的廣泛關注。

在進行冷柜貨架商品統計時，當近距離內攝像頭無法拍到整個貨架的商品時，擴大拍攝距離雖然可以得到大范圍的圖像，但圖像內的商品可能相對較小，放大后會出現馬賽克現象，效果較差，通過硬件設備雖然可以解決這個問題，但廣角鏡頭這樣的硬件價格昂貴、操作復雜，而且會造成圖像邊緣變形，因此，可采用圖像拼接和分割技術，進行貨架商品統計。

現有技術中，用于圖像拼接和分割的方法有很多，但都存在一定的缺陷，例如：基于霍夫圓檢測算法的圖像拼接技術拼接配準后誤差較大；基于旋轉平移不變性算法SURF，則因為冷柜商品圖像存在反光、相似度較高等問題，在匹配圖像特征點時誤差較大，導致基于對應特征點的拼接出現較大誤差；自適應閾值分割算法、最大類間閾值法、邊緣分割算法、區域生長算法RGSA等都不能準確的分割出冷柜貨架中的商品，因此，需要研究一種基于圖像處理技術的冷柜貨架商品統計方法。

發明內容

有鑒于此，本發明提供了一種基于圖像處理技術的冷柜貨架商品統計方法及系統，根據圓心旋轉不變性進行圖像拼接，能夠減小特征點匹配誤差，使拼接得到的圖像效果更好，按照冷柜中的置物隔層將拼接后的圖像分割為與各置物隔層對應的第四圖像，然后對第四圖像進行細化分割處理，能夠準確的分割出各置物隔層中第一排擺放的商品，不僅可以提高統計效率，而且能夠提高商品統計準確率，有利于提高對冷柜商品的管理質量。

為了解決上述技術問題，本申請有如下技術方案：

第一方面，本申請提供一種基于圖像處理技術的冷柜貨架商品統計方法，其特征在于，包括：

通過冷柜上安裝的定位模塊自動獲取所述冷柜的位置信息，并發送給云端服務器；

所述冷柜的柜門包括靠近所述冷柜內部的第一平面和遠離所述冷柜內部的第二平面，在所述第一平面上遠離旋轉軸的一側安裝與所述第一平面角度為θ的第一攝像頭和第二攝像頭，所述第一攝像頭和第二攝像頭包括攝像座，所述攝像座靠近所述第一平面的面為底面，θ指的是所述攝像座的底面與所述第一平面靠近所述冷柜底面一側的夾角，43.86°≤θ≤56.81°，所述柜門的頂端與所述冷柜底面之間的垂直距離為H，所述第一攝像頭與所述冷柜底面之間的垂直距離為1/3*H，所述第二攝像頭與所述冷柜底面之間的垂直距離為1/2*H；

當所述柜門打開的角度為β時，通過串口模塊觸發所述第一攝像頭采集一張第一圖像，觸發所述第二攝像頭采集一張第二圖像，21.96°≤β≤33.96°；

終端控制器對所述第一圖像和第二圖像進行拼接，形成第三圖像，將所述第三圖像傳輸到所述云端服務器，所述冷柜內部包括多個置物隔層，所述置物隔層中擺放有至少一排商品，靠近所述柜門的排為第一排，所述第三圖像包括各所述置物隔層中位于所述第一排的商品圖像；