[發(fā)明專利]用于確定物品標簽的方法和裝置

在審

• 申請?zhí)枺?/td>: 201710995931.3
• 申請日: 2017-10-23
• 公開（公告）號: CN109697481A
• 公開（公告）日: 2019-04-30
• 發(fā)明（設(shè)計）人: 劉曉;譚志羽;陳宇;翁志
• 申請（專利權(quán)）人: 北京京東尚科信息技術(shù)有限公司;北京京東世紀貿(mào)易有限公司
• 主分類號: G06K17/00
• 分類號: G06K17/00;G06K9/46;G06K9/62
• 代理公司: 北京英賽嘉華知識產(chǎn)權(quán)代理有限責任公司 11204
• 代理人: 王達佐;馬曉亞

1.一種用于確定物品標簽的方法，其特征在于，所述方法包括：

從預(yù)先獲取的貨架圖像中提取預(yù)定物品的圖像；

基于預(yù)先訓(xùn)練的機器學(xué)習(xí)模型從所述預(yù)定物品的圖像中提取所述預(yù)定物品的特征；

將所述預(yù)定物品的特征與預(yù)先建立的特征庫進行匹配，其中，所述特征庫中存儲有多個物品中每個物品的特征以及每個物品對應(yīng)的標簽，任意一個物品的特征與該物品對應(yīng)的標簽關(guān)聯(lián)存儲，所述標簽用于表示物品所屬的品項；

將特征庫中與所述預(yù)定物品的特征匹配度最高的特征所對應(yīng)的標簽確定為所述預(yù)定物品的標簽。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述預(yù)先建立的特征庫是按照如下步驟獲得的：

獲取標注了注解信息的物品的圖像；

將所述標注了注解信息的物品的圖像輸入到預(yù)先訓(xùn)練的機器學(xué)習(xí)模型以提取所述物品的特征；

將提取的所述物品的特征與所述物品所對應(yīng)的標簽關(guān)聯(lián)存入特征庫。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，在所述將特征庫中與所述預(yù)定物品的特征匹配度最高的特征所對應(yīng)的標簽確定為所述預(yù)定物品的標簽之后，所述方法還包括：

在所述貨架圖像中增加與各物品對應(yīng)的標簽。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，在所述基于預(yù)先訓(xùn)練的機器學(xué)習(xí)模型從所述預(yù)定物品的圖像中提取所述預(yù)定物品的特征之前，所述方法還包括：

對多個品項的物品中的每個品項的物品，執(zhí)行如下標注操作：獲取所述品項物品的圖像；對所述品項物品的圖像進行標注；

使用經(jīng)過標注的不同品項物品的圖像對機器學(xué)習(xí)模型進行訓(xùn)練。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述機器學(xué)習(xí)模型為深度殘差網(wǎng)絡(luò)模型。

6.一種用于確定物品標簽的裝置，其特征在于，所述裝置包括：

第一提取單元，配置用于從預(yù)先獲取的貨架圖像中提取預(yù)定物品的圖像；

第二提取單元，配置用于基于預(yù)先訓(xùn)練的機器學(xué)習(xí)模型從所述預(yù)定物品的圖像中提取所述預(yù)定物品的特征；

匹配單元，配置用于將所述預(yù)定物品的特征與預(yù)先建立的特征庫進行匹配，其中，所述特征庫中存儲有多個物品中每個物品的特征以及每個物品對應(yīng)的標簽，任意一個物品的特征與該物品對應(yīng)的標簽關(guān)聯(lián)存儲，所述標簽用于表示物品所屬的品項；

標簽確定單元，配置用于將特征庫中與所述預(yù)定物品的特征匹配度最高的特征所對應(yīng)的標簽確定為所述預(yù)定物品的標簽。

7.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述裝置還包括特征庫建立單元，所述特征庫建立單元配置用于：

獲取標注了注解信息的物品的圖像；

將所述標注了注解信息的物品的圖像輸入到預(yù)先訓(xùn)練的機器學(xué)習(xí)模型以提取所述物品的特征；

將提取的所述物品的特征與所述物品所對應(yīng)的標簽關(guān)聯(lián)存入特征庫。

8.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述裝置還包括表標簽增加單元，所述標簽增加單元配置用于：

在所述標簽確定單元將特征庫中與所述預(yù)定物品的特征匹配度最高的特征所對應(yīng)的標簽確定為所述預(yù)定物品的標簽之后，在所述貨架圖像中增加與各物品對應(yīng)的標簽。

9.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述裝置還包括模型訓(xùn)練單元，所述模型訓(xùn)練單元配置用于：

在所述第二提取單元基于預(yù)先訓(xùn)練的機器學(xué)習(xí)模型從所述預(yù)定物品的圖像中提取所述預(yù)定物品的特征之前，對多個品項的物品中的每個品項的物品，執(zhí)行如下標注操作：獲取所述品項物品的圖像，對所述品項物品的圖像進行標注；使用經(jīng)過標注的不同品項物品的圖像對機器學(xué)習(xí)模型進行訓(xùn)練。

10.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述機器學(xué)習(xí)模型為深度殘差網(wǎng)絡(luò)模型。