[發(fā)明專利]貨架空置率計算方法及裝置、電子設(shè)備、存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 201910249974.6
• 申請日: 2019-03-29
• 公開（公告）號: CN109977886B
• 公開（公告）日: 2021-03-09
• 發(fā)明（設(shè)計）人: 劉童;張歡歡;張治國
• 申請（專利權(quán)）人: 京東方科技集團股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/46;G06T7/11;G06T7/13;G06T7/136;G06T7/194;G06T7/45
• 代理公司: 北京風(fēng)雅頌專利代理有限公司 11403
• 代理人: 李莎

本發(fā)明公開了一種貨架空置率計算方法及裝置，包括：利用拍攝單元采集貨架圖像；檢測所述貨架圖像中的商品分區(qū)標(biāo)志物信息；根據(jù)所述商品分區(qū)標(biāo)志物信息，結(jié)合所述拍攝單元與貨架的位置關(guān)系以及拍攝單元的拍攝視角，計算所述貨架圖像中的商品落位區(qū)；所述商品落位區(qū)為商品在貨架上的放置區(qū)域在所述貨架圖像中所占據(jù)的區(qū)域；利用圖像分割方法，將所述商品落位區(qū)分割為商品區(qū)域和背景區(qū)域；根據(jù)所述商品區(qū)域與所述背景區(qū)域的比例，計算所述貨架空置率。本發(fā)明還公開了一種電子設(shè)備和存儲介質(zhì)。

技術(shù)領(lǐng)域

本發(fā)明涉及圖像處理技術(shù)領(lǐng)域，特別是指一種貨架空置率計算方法及裝置、電子設(shè)備、存儲介質(zhì)。

背景技術(shù)

常用的基于計算機視覺的方法，利用目標(biāo)檢測方法檢測出貨架圖像中商品的類別和數(shù)量，從而判斷貨架上商品的數(shù)目。缺點是需要針對每種商品采集、標(biāo)注訓(xùn)練樣本，并進行模型訓(xùn)練，當(dāng)商品種類繁多或者變化很快的時候，這種方案很難實現(xiàn)產(chǎn)品化。

超市需要根據(jù)貨架上商品的情況來確定是否需要補貨。現(xiàn)在超市最常用的方法是定期由工作人員巡視貨架，當(dāng)發(fā)現(xiàn)貨架空置空間較多時進行補貨，缺點是消耗人力，還不能及時發(fā)現(xiàn)缺貨。如果安裝攝像頭拍攝貨架，并采用商品檢測實時檢測貨架上商品的類別和數(shù)量，雖然可以根據(jù)商品數(shù)量來判斷缺貨情況，但需要對每種商品采集、標(biāo)注數(shù)據(jù)和訓(xùn)練模型，工作量太大。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明實施例的目的之一在于，提出一種貨架空置率計算方法及裝置、電子設(shè)備、存儲介質(zhì)，能夠在一定程度上優(yōu)化貨架空置率的計算方法。

基于上述目的，本發(fā)明實施例的第一個方面，提供了一種貨架空置率計算方法，包括：

利用拍攝單元采集貨架圖像；

檢測所述貨架圖像中的商品分區(qū)標(biāo)志物信息；

根據(jù)所述商品分區(qū)標(biāo)志物信息，結(jié)合所述拍攝單元與貨架的位置關(guān)系以及拍攝單元的拍攝視角，計算所述貨架圖像中的商品落位區(qū)；所述商品落位區(qū)為商品在貨架上的放置區(qū)域在所述貨架圖像中所占據(jù)的區(qū)域；

利用圖像分割方法，將所述商品落位區(qū)分割為商品區(qū)域和背景區(qū)域；

根據(jù)所述商品區(qū)域與所述背景區(qū)域的比例，計算所述貨架空置率。

可選地，所述貨架空置率計算方法，還包括：

若所述貨架空置率大于預(yù)設(shè)空置率閾值，則向指定用戶發(fā)送提示信息。

可選地，所述商品分區(qū)標(biāo)志物信息包括價簽背板信息和價簽信息。

可選地，檢測所述貨架圖像中的價簽背板信息，包括：

對所述貨架圖像進行直線檢測，得到直線檢測結(jié)果；

基于價簽背板的邊緣特性和形狀特性，去除所述直線檢測結(jié)果中虛假的價簽背板邊緣直線，并連接斷裂的價簽背板邊緣直線。

可選地，檢測所述貨架圖像中的價簽信息，包括：

獲取價簽?zāi)０鍒D像；

提取所述價簽?zāi)０鍒D像和所述貨架圖像的第一圖像特征；

根據(jù)所述價簽?zāi)０鍒D像和所述貨架圖像的第一圖像特征，計算第一相關(guān)系數(shù)，并生成價簽顯著圖；

對所述價簽顯著圖進行自適應(yīng)閾值分割，得到疑似價簽區(qū)域的中心點集合；

根據(jù)所述疑似價簽區(qū)域的中心點集合，確定所述貨架圖像中的疑似價簽區(qū)域；

提取所述疑似價簽區(qū)域與所述價簽?zāi)０鍒D像的第二圖像特征；

根據(jù)所述疑似價簽區(qū)域與所述價簽?zāi)０鍒D像的第二圖像特征，計算第二相關(guān)系數(shù)；

確定所述第二相關(guān)系數(shù)大于預(yù)設(shè)系數(shù)閾值的疑似價簽區(qū)域為價簽。