[發(fā)明專利]手持物體識別方法及裝置

在審

• 申請?zhí)枺?/td>: 202010756462.1
• 申請日: 2020-07-29
• 公開（公告）號: CN112016398A
• 公開（公告）日: 2020-12-01
• 發(fā)明（設(shè)計）人: 郝磊;岳俊;許松岑
• 申請（專利權(quán)）人: 華為技術(shù)有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G06F16/583;G06N3/04;G06N3/08
• 代理公司: 廣州三環(huán)專利商標(biāo)代理有限公司 44202
• 代理人: 熊永強(qiáng);李稷芳

1.一種手持物體識別方法，其特征在于，包括：

獲取待識別圖像中一個或多個檢測對象中每個檢測對象的位置信息，并獲取所述每個檢測對象的第一標(biāo)簽，所述每個檢測對象的位置信息為該檢測對象在所述待識別圖像中的位置信息，所述檢測對象的第一標(biāo)簽用于指示所述檢測對象的類型，所述檢測對象的類型用于表征所述檢測對象的手持關(guān)系；

根據(jù)所述每個檢測對象的第一標(biāo)簽從所述一個或多個檢測對象中獲取所述手持物體，并從所述一個或多個檢測對象的位置信息獲取所述手持物體的位置信息；

根據(jù)所述手持物體的位置信息對所述待識別圖像中所述手持物體進(jìn)行識別，以得到所述手持物體的識別結(jié)果。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述第一標(biāo)簽包括子類標(biāo)簽，所述子類標(biāo)簽用于指示所述檢測對象的第一類型，所述獲取所述每個檢測對象的第一標(biāo)簽，包括：

在獲取所述待識別圖像的第一特征向量后，對所述待識別圖像的第一特征向量進(jìn)行第一卷積操作，以得到所述待識別圖像的第二特征向量；

對所述待識別圖像的第二特征向量進(jìn)行第一全連接操作，以得到所述每個檢測對象的第一標(biāo)簽，其中，所述第一類型包括手持狀態(tài)下的物體和非手持狀態(tài)下的物體。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述第一類型還包括持有物體的手和未持有物體的手。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述第一標(biāo)簽還包括超類標(biāo)簽，所述超類標(biāo)簽用于指示所述檢測對象的第二類型，所述第一類型為所述第二類型的子類，所述獲取所述每個檢測對象的第一標(biāo)簽還包括：

在獲取所述待識別圖像的第一特征向量后，對所述第一特征向量進(jìn)行第二卷積操作，以得到所述待識別圖像的第三特征向量；

將所述第二特征向量和所述第三特征向量進(jìn)行融合操作，以得到所述待識別圖像的第四特征向量；

對所述第四特征向量進(jìn)行第三卷積操作，以得到所述待識別圖像的第五特征向量；

對所述第五特征向量進(jìn)行第二全連接操作，以得到所述每個檢測對象的超類標(biāo)簽；其中，第二類型包括手和物體。

5.根據(jù)權(quán)利要求1-4任一項(xiàng)所述的方法，其特征在于，所述獲取所述待識別圖像中一個或多個檢測對象中每個檢測對象的位置信息，包括：

在獲取待識別圖像的第一特征向量后，根據(jù)所述待識別圖像的第一特征向量對所述待識別圖像中一個或多個檢測對象進(jìn)行邊框回歸操作，以得到所述一個或多個檢測對象中每個檢測對象的位置信息。

6.根據(jù)權(quán)利要求1-5任一項(xiàng)所述的方法，其特征在于，所述根據(jù)所述手持物體的位置信息對所述待識別圖像中所述手持物體進(jìn)行識別，以得到所述手持物體的識別結(jié)果，包括：

根據(jù)所述手持物體的位置信息從所述待識別圖像中裁剪出包含所述手持物體的圖像塊，所述圖像塊為所述待識別圖像的一部分；

對所述圖像塊中的所述手持物體進(jìn)行特征提取，以得到所述手持物體的第一特征向量；

根據(jù)所述手持物體的第一特征向量確定所述手持物體的參考標(biāo)簽及第一置信度，所述第一置信度為所述手持物體的標(biāo)簽為所述參考標(biāo)簽的概率；

根據(jù)所述手持物體的參考標(biāo)簽和第一置信度獲取所述手持物體的識別結(jié)果。