[發明專利]用于基于視覺的結賬的被遮擋物品檢測

在審

• 申請號: 202110721952.2
• 申請日: 2021-06-28
• 公開（公告）號: CN113869343A
• 公開（公告）日: 2021-12-31
• 發明（設計）人: 弗蘭克·道格拉斯·希內克;楊茜
• 申請（專利權）人: NCR公司
• 主分類號: G06K9/62
• 分類號: G06K9/62;G06K9/46;G06N20/20;G06Q40/04;G06T7/136;G06T7/194
• 代理公司: 上海脫穎律師事務所 31259
• 代理人: 脫穎

針對單個物品從不同視圖訓練給定物品的物品識別。然后，針對被第二物品部分遮擋的所述給定物品的圖像訓練所述物品識別，所述第二物品的形狀和特征與所述給定物品的形狀和特征相同、相似或不同。當向所述給定物品呈現具有多個不同的被遮擋視圖的多個不同的物品時，標注所述物品的一般特征并使用所述一般特征來檢測所述給定物品。

技術領域

背景技術

當前的物品結賬方法需要將單個物品放在指定架子上，以便于相機捕獲或掃描經過掃描器的單個物品的條形碼。相機物品捕獲和后續物品識別需要對從多個不同角度拍攝的每個物品的各種圖像進行大量訓練。此外，在訓練期間，對圖像進行注釋，以確保對每個物品進行適當的訓練和識別。

與在結賬期間一次標識和識別單個物品相關聯的當前方法是低效的。客戶已經單獨選擇要購買的物品，并且在結賬期間，客戶或收銀員為了標識要結賬的每個物品而再次單獨處理每個物品，這非常耗時。

一些技術嘗試在結賬期間識別多個物品，但此類技術容易出錯且準確性差。這是因為當將多個物品放在收銀臺(已經是小區域)上時，物品會部分覆蓋或遮擋彼此在所述收銀臺上的完整視圖。

現有技術試圖通過嘗試利用全部從不同位置和角度覆蓋彼此的多個不同物品訓練物品識別來解決這個問題。對可能出現的所有可能的組合進行訓練并不可行(如果有可能的話)。因此，這些技術的準確性較差，并且實施這些技術需要很長時間，因為即使實現邊緣水平的可接受準確性也需要極大的訓練圖像大小。此外，訓練圖像需要手動注釋，這意味著即使獲得質量良好且大小足夠的圖像訓練集也是相當艱巨的任務。

發明內容

在各種實施例中，呈現了用于對具有被遮擋物品視圖的多個物品進行基于視覺的檢測的方法和系統。PIN小鍵盤(PINpad)包含集成式掃描器/相機和獨立的安全處理。

根據實施例，提供了一種用于對具有被遮擋物品視圖的多個物品進行基于視覺的檢測的方法。獲得圖像；所述圖像表示包括多個物品的交易區域。從所述圖像中提取特征，并且基于所述特征在所述圖像內限定邊界框。每個邊界框表示不同物品或不同物品集合，其中所述不同物品集合中的至少一個物品在對應的邊界框內被遮擋。用所述邊界框處理所述特征并且將物品標識符分配到來自所述圖像的所述多個物品中的每一個。在交易終端處進行交易期間向交易管理器提供所述物品標識符。

附圖說明

圖1是根據示例實施例的用于對具有被遮擋物品視圖的多個物品進行基于視覺的檢測的系統的圖式。

圖2是根據示例實施例的用于對具有被遮擋物品視圖的多個物品進行基于視覺的檢測的方法的圖式。

圖3是根據示例實施例的用于對具有被遮擋物品視圖的多個物品進行基于視覺的檢測的另一方法的圖式。

具體實施方式

根據示例實施例，圖1是根據示例實施例的用于對具有被遮擋物品視圖的多個物品進行基于視覺的檢測的系統100的圖式。應注意，組件是以大大簡化的形式示意性地示出，其中僅繪示了與對實施例的理解相關的那些組件。

此外，僅出于圖解目的，圖示了各種組件(標示于圖1中)并呈現了所述組件的布置。應注意，在不脫離本文和下文呈現的對具有被遮擋物品視圖的多個物品的基于視覺的檢測的教示的情況下，具有更多或更少組件的其它布置是可能的。