[發(fā)明專利]貨架空置率計算方法及裝置、電子設(shè)備、存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 201910249974.6
• 申請日: 2019-03-29
• 公開（公告）號: CN109977886B
• 公開（公告）日: 2021-03-09
• 發(fā)明（設(shè)計）人: 劉童;張歡歡;張治國
• 申請（專利權(quán)）人: 京東方科技集團股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/46;G06T7/11;G06T7/13;G06T7/136;G06T7/194;G06T7/45
• 代理公司: 北京風(fēng)雅頌專利代理有限公司 11403
• 代理人: 李莎

1.一種貨架空置率計算方法，其特征在于，包括：

利用拍攝單元采集貨架圖像；

檢測所述貨架圖像中的商品分區(qū)標(biāo)志物信息；

根據(jù)所述商品分區(qū)標(biāo)志物信息，結(jié)合所述拍攝單元與貨架的位置關(guān)系以及拍攝單元的拍攝視角，計算所述貨架圖像中的商品落位區(qū)；所述商品落位區(qū)為商品在貨架上的放置區(qū)域在所述貨架圖像中所占據(jù)的區(qū)域；

利用圖像分割方法，將所述商品落位區(qū)分割為商品區(qū)域和背景區(qū)域；

根據(jù)所述商品區(qū)域與所述背景區(qū)域的比例，計算所述貨架空置率；

其中，所述商品落位區(qū)在所述貨架圖像中為四邊形區(qū)域，該四邊形區(qū)域的四個頂點分別為在所述貨架圖像中的靠近貨架外側(cè)的第一頂點和第二頂點以及對應(yīng)的靠近貨架里側(cè)的第三頂點和第四頂點；所述貨架圖像的下邊緣與貨架的下邊緣重合，所述貨架圖像的中心點與貨架的中心點重合；

根據(jù)所述商品分區(qū)標(biāo)志物信息，結(jié)合所述拍攝單元與貨架的位置關(guān)系以及拍攝單元的拍攝視角，計算所述貨架圖像中的商品落位區(qū)，包括：

根據(jù)所述商品分區(qū)標(biāo)志物信息，得到所述商品落位區(qū)的第一頂點和第二頂點在所述貨架圖像中的坐標(biāo)；

根據(jù)所述拍攝單元與貨架的水平位置關(guān)系以及所述拍攝單元的水平拍攝視角，結(jié)合所述商品落位區(qū)的第一頂點和第二頂點在所述貨架圖像中的橫坐標(biāo)，計算所述第三頂點和第四頂點的橫坐標(biāo)；

根據(jù)所述拍攝單元與貨架的豎直位置關(guān)系以及所述拍攝單元的豎直拍攝視角，結(jié)合所述商品落位區(qū)的第一頂點和第二頂點在所述貨架圖像中的縱坐標(biāo)，計算所述第三頂點和第四頂點的縱坐標(biāo)。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，還包括：

若所述貨架空置率大于預(yù)設(shè)空置率閾值，則向指定用戶發(fā)送提示信息。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述商品分區(qū)標(biāo)志物信息包括價簽背板信息和價簽信息。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，檢測所述貨架圖像中的價簽背板信息，包括：

對所述貨架圖像進行直線檢測，得到直線檢測結(jié)果；

基于價簽背板的邊緣特性和形狀特性，去除所述直線檢測結(jié)果中虛假的價簽背板邊緣直線，并連接斷裂的價簽背板邊緣直線。

5.根據(jù)權(quán)利要求3所述的方法，其特征在于，檢測所述貨架圖像中的價簽信息，包括：

獲取價簽?zāi)０鍒D像；

提取所述價簽?zāi)０鍒D像和所述貨架圖像的第一圖像特征；

根據(jù)所述價簽?zāi)０鍒D像和所述貨架圖像的第一圖像特征，計算第一相關(guān)系數(shù)，并生成價簽顯著圖；

對所述價簽顯著圖進行自適應(yīng)閾值分割，得到疑似價簽區(qū)域的中心點集合；

根據(jù)所述疑似價簽區(qū)域的中心點集合，確定所述貨架圖像中的疑似價簽區(qū)域；

提取所述疑似價簽區(qū)域與所述價簽?zāi)０鍒D像的第二圖像特征；

根據(jù)所述疑似價簽區(qū)域與所述價簽?zāi)０鍒D像的第二圖像特征，計算第二相關(guān)系數(shù)；

確定所述第二相關(guān)系數(shù)大于預(yù)設(shè)系數(shù)閾值的疑似價簽區(qū)域為價簽。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，還包括：

若所述商品落位區(qū)的第三頂點和第四頂點的縱坐標(biāo)大于所述商品落位區(qū)所在貨架層的上一貨架層的商品落位區(qū)的第一點和第二點的縱坐標(biāo)，則將所述上一貨架層的商品落位區(qū)的第一頂點和第二頂點的縱坐標(biāo)替換為所述商品落位區(qū)的第三頂點和第四頂點的縱坐標(biāo)；

根據(jù)所述商品落位區(qū)第一頂點的坐標(biāo)以及對應(yīng)的第三頂點的坐標(biāo)，構(gòu)建第一直線函數(shù)，并且，根據(jù)所述商品落位區(qū)第二頂點的坐標(biāo)以及對應(yīng)的第四頂點的坐標(biāo)，構(gòu)建第二直線函數(shù)；

將所述上一貨架層的商品落位區(qū)的第一頂點的縱坐標(biāo)代入所述第一直線函數(shù)，得到的橫坐標(biāo)替換為所述商品落位區(qū)的第三頂點的橫坐標(biāo)；

將所述上一貨架層的商品落位區(qū)的第二頂點的縱坐標(biāo)代入所述第二直線函數(shù)，得到的橫坐標(biāo)替換為所述商品落位區(qū)的第四頂點的橫坐標(biāo)。