[發明專利]物品取放識別方法、裝置及設備

有效

• 申請號: 201910199219.1
• 申請日: 2019-03-15
• 公開（公告）號: CN109977824B
• 公開（公告）日: 2021-06-01
• 發明（設計）人: 羅宇軒;亢樂;包英澤
• 申請（專利權）人: 百度在線網絡技術（北京）有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G06K9/46
• 代理公司: 北京清亦華知識產權代理事務所(普通合伙) 11201
• 代理人: 宋合成

本發明提出了一種物品取放識別方法、裝置及設備，其中，方法包括：獲取待識別的視頻；根據預先訓練的識別模型對視頻進行識別處理，獲取發生變化的視頻幀中的變化區域和變化類型；根據變化區域對目標視頻幀進行識別，獲取物品類型，根據物品類型和變化類型生成物品取放識別結果。由此，解決了相關技術中無法準確處理商品擺放緊湊，商品之間相互遮擋的場景的問題，提高了識別的準確率。

技術領域

本發明涉及計算機視覺技術領域，尤其涉及一種物品取放識別方法、裝置及設備。

背景技術

商品取放識別技術是指在無人零售場景例如如無人超市、無人貨柜中，通過傳感器自動分析貨架上的商品變化情況(如一瓶可樂被拿走，一瓶雪碧被放回等)的技術。

相關技術中，通常先檢測識別貨架商品變化前后兩幀圖像中所有物品的位置和物品類別，進而統計一定范圍區域內兩幀圖像中物品種類和數量的變化情況。該方案無法準確處理商品擺放緊湊，商品之間相互遮擋的場景，識別準確率有待提高。

發明內容

本發明旨在至少在一定程度上解決相關技術中的技術問題之一。

為此，本發明的第一個目的在于提出一種物品取放識別方法，解決了相關技術中無法準確處理商品擺放緊湊，商品之間相互遮擋的場景的問題，提高了識別的準確率。

本發明的第二個目的在于提出一種物品取放識別裝置。

本發明的第三個目的在于提出一種計算機設備。

本發明的第四個目的在于提出一種非臨時性計算機可讀存儲介質。

本發明第一方面實施例提出了一種物品取放識別方法，包括：

獲取待識別的視頻；

根據預先訓練的識別模型對所述視頻進行識別處理，獲取發生變化的視頻幀中的變化區域和變化類型；

根據所述變化區域對目標視頻幀進行識別，獲取物品類型，根據所述物品類型和所述變化類型生成物品取放識別結果。

本發明實施例的物品取放識別方法，通過獲取待識別的視頻；根據預先訓練的識別模型對視頻進行識別處理，獲取發生變化的視頻幀中的變化區域和變化類型；根據變化區域對目標視頻幀進行識別，獲取物品類型，根據物品類型和變化類型生成物品取放識別結果。由此，通過識別模型識別出視頻中的變化區域和變化類型，進而根據變化區域對目標視頻幀進行識別，獲取物品類型，解決了相關技術中無法準確處理商品擺放緊湊，商品之間相互遮擋的場景的問題，提高了識別的準確率。此外，相對于追蹤用戶動作識別類型的方案，避免了因運動導致圖像模糊、識別精度低的情況，避免了用戶手部遮擋物品影響識別精度的情況，提高了識別精度，并且在保證準確性的同時，無需實時追蹤人手并識別商品，降低了計算成本。

另外，根據本發明上述實施例的物品取放識別方法還可以具有如下附加技術特征：

可選地，所述根據預先訓練的識別模型對所述視頻進行識別處理，獲取發生變化的視頻幀中的變化區域和變化類型，包括：提取所述視頻中的多幀圖像的特征，將所述多幀圖像的特征進行聚合；對聚合后的特征進行特征變換，根據特征變換結果確定發生變化的視頻幀中的變化區域和變化類型。

可選地，在根據預先訓練的識別模型對所述視頻進行識別處理之前，還包括：獲取包含變化區域標記和變化類型標記的圖像數據，其中，所述圖像數據至少包括變化前后的兩幀圖像；根據預設的目標函數和所述圖像數據訓練預設模型的處理參數，生成所述識別模型。