[發明專利]一種基于神經網絡的手套檢測方法及其系統

在審

• 申請號: 202111523807.X
• 申請日: 2021-12-14
• 公開（公告）號: CN113920547A
• 公開（公告）日: 2022-01-11
• 發明（設計）人: 尹科才;沈復民;申恒濤
• 申請（專利權）人: 成都考拉悠然科技有限公司
• 主分類號: G06V40/10
• 分類號: G06V40/10;G06V10/774;G06V10/82;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 成都市集智匯華知識產權代理事務所(普通合伙) 51237
• 代理人: 李華;溫黎娟

1.一種基于神經網絡的手套檢測方法，其特征在于，包括：

獲取檢測圖像；

獲取預訓練的神經網絡模型，將所述檢測圖像輸入所述神經網絡模型生成多類別的檢測框，所述檢測框的類別包括：人體檢測框、手部檢測框和手套檢測框；

對所述人體檢測框與所述手部檢測框進行重疊度判斷，獲取與所述人體檢測框重疊度高于第一閾值的所述手部檢測框作為可信手部檢測框；

對所述手套檢測框與所述可信手部檢測框進行重疊度判斷，獲取與所述可信手部檢測框重疊度高于第二閾值的所述手套檢測框作為可信手套檢測框；

基于所述可信手套檢測框生成手套檢測結果。

2.根據權利要求1所述的手套檢測方法，其特征在于，所述手套檢測方法還包括：

在對所述人體檢測框與所述手部檢測框進行重疊度判斷之前，對所述人體檢測框、所述手部檢測框和所述手套檢測框進行置信度判斷，剔除置信度低于第三閾值的所述人體檢測框、所述手部檢測框和所述手套檢測框。

3.根據權利要求2所述的手套檢測方法，其特征在于，對所述人體檢測框與所述手部檢測框進行重疊度判斷包括；

提取所述神經網絡模型輸出的所述人體檢測框的（x，y，w，h）坐標作為人體檢測框區域坐標，其中，（x，y）為所述檢測框的左上角坐標，w為所述檢測框的寬，h為所述檢測框的高；

提取所述神經網絡模型輸出的所述手部檢測框的（x，y，w，h）坐標作為手部檢測框區域坐標；

基于所述人體檢測框區域坐標與所述手部檢測框區域坐標計算所述手部檢測框與所述人體檢測框的所述重疊度。

4.根據權利要求3所述的手套檢測方法，其特征在于，對所述手套檢測框與所述可信手部檢測框進行重疊度判斷，包括：

提取所述神經網絡模型輸出的所述手套檢測框的（x，y，w，h）坐標作為手套檢測框區域坐標；

提取所述神經網絡模型輸出的所述可信手部檢測框的（x，y，w，h）坐標作為可信手部檢測框坐標；

基于所述手套檢測框區域坐標與所述可信手部檢測框坐標計算所述手套檢測框與所述可信手部檢測框的所述重疊度。

5.根據權利要求1所述的手套檢測方法，其特征在于，訓練所述神經網絡模型，包括：

構建初始化網絡模型，其中，網絡模型包括語義分割模型；

獲取包含多類別標記的圖像樣本構成的訓練數據集和測試數據集，其中，標記類別包括人體、手部和手套；

基于所述訓練數據集和所述測試數據集訓練并測試所述神經網絡模型。

6.一種基于神經網絡的手套檢測系統，其特征在于，包括：

攝像單元，用于采集檢測圖像；

數據處理單元，用于獲取預訓練的神經網絡模型，將所述檢測圖像輸入所述神經網絡模型生成多類別的檢測框，所述檢測框的類別包括：人體檢測框、手部檢測框和手套檢測框，并對所述人體檢測框與所述手部檢測框進行重疊度判斷，獲取與所述人體檢測框重疊度高于第一閾值的所述手部檢測框作為可信手部檢測框的同時，對所述手套檢測框與所述可信手部檢測框進行重疊度判斷，獲取與所述可信手部檢測框重疊度高于第二閾值的所述手套檢測框作為可信手套檢測框后，基于所述可信手套檢測框生成手套檢測結果。

7.根據權利要求6所述的手套檢測系統，其特征在于，所述數據處理單元包括：

第一過濾模塊，用于剔除置信度低于第三閾值的所述人體檢測框、所述手部檢測框和所述手套檢測框；

第二過濾模塊，用于提取與所述人體檢測框重疊度高于第一閾值的所述手部檢測框作為可信手部檢測框；

第三過濾模快，用于提取與所述可信手部檢測框重疊度高于第二閾值的所述手套檢測框作為可信手套檢測框。

8.根據權利要求7所述的手套檢測系統，其特征在于，所述數據處理單元還包括緩存模塊，用于存儲所述檢測圖像、多類別的檢測框數據和所述手套檢測結果。