[發明專利]多視角圖像對比檢測的訂單生成方法及智能售貨機

在審

• 申請號: 202210276704.6
• 申請日: 2021-11-03
• 公開（公告）號: CN114648715A
• 公開（公告）日: 2022-06-21
• 發明（設計）人: 陳俏鋒;黃超群;邱俊波;王浩;張杰;束學璋;張元熙;郭家龍
• 申請（專利權）人: 深圳友朋智能商業科技有限公司
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06Q30/06;G06T5/50;G06T7/11;H04N5/265
• 代理公司: 成都恪睿信專利代理事務所(普通合伙) 51303
• 代理人: 陳興強

本發明屬于圖像處理技術領域，解決了現有技術智能售貨機存在操作繁瑣或異常訂單，所導致的用戶體驗效果不佳技術問題，提供了一種多視角圖像對比檢測的訂單生成裝置方法及智能售貨機。該方法包括:獲取商品區域的第一主視頻和與第一主視頻視角不同的第二主視頻；將第一主視頻和第二主視頻的各幀圖像進行合并，得到目標視頻；對目標視頻的各幀圖像進行圖像分析，得到用于生成商品訂單信息的各目標商品，從而得到最終的商品訂單信息。本發明還包括用于執行上述方法的裝置及智能售貨機。本發明可以通過從不同視角獲取購物視頻，避免商品被遮擋影響檢測準確性，避免異常訂單產生。

本申請是2021年11月03日提交、發明名稱為“多視角采集圖像后融合的智能生成訂單方法及智能售貨機”申請號為202111291693.0的發明專利申請的分案申請。

技術領域

本發明涉及圖像分析技術領域，尤其涉及一種多視角圖像對比檢測的訂單生成方法及智能售貨機。

背景技術

隨著人工智能技術的不斷發展，零售業的售賣方式也發生了巨大的變化，其中智能售貨機已經遍布在城市的各種場合，包括車站、商城、旅游景區或百貨店均能發現各式各樣的智能售貨機，智能售貨機以其無需專人看守、用戶自動下單、購物結賬的方式，極大遍歷了特殊場景用戶對于商品的購物需求。

然而，現有智能售貨機包括全開門智能售貨機和通過按鍵下單的智能售貨機，其中，全開門智能售貨機用戶可以在智能售貨機柜門打開時，在一次購物中可以進行多次拿放操作，同時可以一次選擇多件商品后再進行統一結算，該智能售貨機極大方便了用戶的購物需求，但是這類智能售貨機因為主要依賴購物視頻進行商品訂單結算，當用戶在拿放商品時，商品部分特征會被遮擋，因此容易產生誤檢，生成異常訂單的問題；另一類通過按鍵下單的智能售貨機在用戶需要購物時，需要事先確定自己需要購買的所有商品，然后購買一件進行一次結算后再進行第二件購買及結算，經過多次下單和結算才能完成所有購物，且不能回退商品，因此存在操作繁瑣的問題。

發明內容

有鑒于此，本發明實施例提供了一種多視角圖像對比檢測的訂單生成方法及智能售貨機，用以解決現有的智能售貨機存在操作繁瑣或異常訂單，所導致的用戶體驗效果不佳技術問題。

本發明采用的技術方案是：

本發明提供了一種多視角圖像對比檢測的訂單生成方法，所述方法包括：

獲取第一主攝像頭從第一視角采集的第一主視頻和第二主攝像頭從不同于所述第一視角的第二視角采集的同一購物事件的第二主視頻；

根據所述第一主視頻和所述第二主視頻中的各幀圖像的采集時序，將所述第一主視頻與所述第二主視頻的各幀圖像依次進行物理拼接，得到目標視頻；

利用目標檢測模型對所述目標視頻的各幀圖像進行檢測，輸出所述目標視頻中與所述第一主視頻的各幀圖像對應的第一檢測結果和與所述第二主視頻的各幀圖像對應的第二檢測結果；

根據所述第一檢測結果和所述第二檢測結果，輸出當前購物事件對應的各目標商品的商品訂單信息。

優選地，所述獲取第一主攝像頭從第一視角采集的第一主視頻和第二主攝像頭從不同于所述第一視角的第二視角采集的同一購物事件的第二主視頻包括：

獲取第三攝像頭采集的智能售貨機當前的售貨機狀態視頻；

對所述售貨機狀態視頻的各幀圖像進行分析，輸出智能售貨機的柜門狀態信息，其中，所述柜門狀態信息包括開啟狀態信息和關閉狀態信息；

控制所述第一主攝像頭和所述第二主攝像頭根據所述開啟狀態信息采集智能售貨機的商品區域的視頻數據，控制所述第一主攝像頭和所述第二主攝像頭根據所述關閉狀態信息停止采集智能售貨機的商品區域的視頻數據，得到所述第一主視頻和所述第二主視頻。