[發明專利]多視角圖像對比檢測的訂單生成方法及智能售貨機

在審

• 申請號: 202210276704.6
• 申請日: 2021-11-03
• 公開（公告）號: CN114648715A
• 公開（公告）日: 2022-06-21
• 發明（設計）人: 陳俏鋒;黃超群;邱俊波;王浩;張杰;束學璋;張元熙;郭家龍
• 申請（專利權）人: 深圳友朋智能商業科技有限公司
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06Q30/06;G06T5/50;G06T7/11;H04N5/265
• 代理公司: 成都恪睿信專利代理事務所(普通合伙) 51303
• 代理人: 陳興強

1.一種多視角圖像對比檢測的訂單生成方法，其特征在于，所述方法包括：

獲取第一主攝像頭從第一視角采集的第一主視頻和第二主攝像頭從不同于所述第一視角的第二視角采集的同一購物事件的第二主視頻；

根據所述第一主視頻和所述第二主視頻中的各幀圖像的采集時序，將所述第一主視頻與所述第二主視頻的各幀圖像依次進行物理拼接，得到目標視頻；

利用目標檢測模型對所述目標視頻的各幀圖像進行檢測，輸出所述目標視頻中與所述第一主視頻的各幀圖像對應的第一檢測結果和與所述第二主視頻的各幀圖像對應的第二檢測結果；

根據所述第一檢測結果和所述第二檢測結果，輸出當前購物事件對應的各目標商品的商品訂單信息。

2.根據權利要求1所述的多視角圖像對比檢測的訂單生成方法，其特征在于，所述獲取第一主攝像頭從第一視角采集的第一主視頻和第二主攝像頭從不同于所述第一視角的第二視角采集的同一購物事件的第二主視頻包括：

獲取第三攝像頭采集的智能售貨機當前的售貨機狀態視頻；

對所述售貨機狀態視頻的各幀圖像進行分析，輸出智能售貨機的柜門狀態信息，其中，所述柜門狀態信息包括開啟狀態信息和關閉狀態信息；

控制所述第一主攝像頭和所述第二主攝像頭根據所述開啟狀態信息采集智能售貨機的商品區域的視頻數據，控制所述第一主攝像頭和所述第二主攝像頭根據所述關閉狀態信息停止采集智能售貨機的商品區域的視頻數據，得到所述第一主視頻和所述第二主視頻。

3.根據權利要求1或2所述的多視角圖像對比檢測的訂單生成方法，其特征在于，所述獲取第一主攝像頭從第一視角采集的第一主視頻和第二主攝像頭從不同于所述第一視角的第二視角采集的同一購物事件的第二主視頻包括：

獲取所述第一主攝像頭和所述第二主攝像頭采集相同時序對應的各幀圖像的間隔時間；

根據所述間隔時間，分別控制所述第一主攝像頭和所述第二主攝像頭采集同一購物事件的視頻圖像，得到所述第一主視頻和所述第二主視頻；

其中，所述間隔時間小于幀率對應的兩幀圖像的時間間隔。

4.根據權利要求3所述的多視角圖像對比檢測的訂單生成方法，其特征在于，所述根據所述第一主視頻和所述第二主視頻中的各幀圖像的采集時序，將所述第一主視頻與所述第二主視頻的各幀圖像依次進行物理拼接，得到目標視頻包括：

獲取所述第一主視頻對應的第一起始時刻和所述第二主視頻對應的第二起始時刻；

根據所述第一起始時刻、所述第二起始時刻和所述間隔時間，將所述第一主視頻的各幀圖像與所述第二主視頻中時序相對應的各幀圖像進行一一合并，生成所述目標視頻；

其中，所述目標視頻的每幀圖像尺寸為所述第一主視頻的各幀圖像的尺寸與第二主視頻對應的各幀圖像的尺寸之和。

5.根據權利要求3所述的多視角圖像對比檢測的訂單生成方法，其特征在于，所述利用目標檢測模型對所述目標視頻的各幀圖像進行檢測，輸出所述目標視頻中與所述第一主視頻的各幀圖像對應的第一檢測結果和與所述第二主視頻的各幀圖像對應的第二檢測結果包括:

將所述目標視頻的各幀圖像分為屬于所述第一主視頻的第一圖像區域和屬于所述第二主視頻的第二圖像區域；

利用所述目標檢測模型對所述目標視頻的各幀圖像進行檢測，得到與所述第一圖像區域對應的第一檢測結果和與所述第二圖像區域對應的第二檢測結果；

其中，所述第一檢測結果和所述第二檢測結果均包含：各商品的類別、與各商品一一對應的置信度和所有幀圖像檢出的各類商品各自對應的平均置信度。