[發(fā)明專利]設(shè)備控制方法、裝置、電子設(shè)備及存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 202110301465.0
• 申請日: 2021-03-22
• 公開（公告）號: CN113031464B
• 公開（公告）日: 2022-11-22
• 發(fā)明（設(shè)計）人: 孔祥暉
• 申請（專利權(quán)）人: 北京市商湯科技開發(fā)有限公司
• 主分類號: G05B19/04
• 分類號: G05B19/04;G06K9/00
• 代理公司: 北京中知恒瑞知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11889
• 代理人: 吳迪

本公開提供了一種設(shè)備控制方法、裝置、電子設(shè)備及存儲介質(zhì)，該方法包括：對獲取的第一待檢測圖像進(jìn)行手部檢測，確定與預(yù)設(shè)手勢類別匹配的目標(biāo)手部的手部檢測信息；基于所述目標(biāo)手部的手部檢測信息，對獲取的第二待檢測圖像中與所述目標(biāo)手部相連的目標(biāo)肢體進(jìn)行肢體跟蹤檢測，并確定所述目標(biāo)手部在所述第二待檢測圖像中的手勢識別結(jié)果；其中，所述第二待檢測圖像為在所述第一待檢測圖像之后獲取到的圖像；基于所述手勢識別結(jié)果，控制目標(biāo)設(shè)備。

技術(shù)領(lǐng)域

本公開涉及計算機視覺技術(shù)領(lǐng)域，具體而言，涉及一種設(shè)備控制方法、裝置、電子設(shè)備及存儲介質(zhì)。

背景技術(shù)

隨著科學(xué)技術(shù)的發(fā)展，人們不斷的對人機交互的水平和質(zhì)量提出新的要求和調(diào)整。其中，由于手勢具有直觀性、自然性等特點，使得手勢已成為人機交互的一種重要手段。因此，基于計算機視覺的手勢識別成為了人機交互領(lǐng)域的研究重點。

一般的，可以通過獲取的圖像，確定用戶的手勢類別，利用確定的手勢類別，實現(xiàn)對目標(biāo)設(shè)備的控制，但是在人機交互場景內(nèi)存在多個用戶時，不同用戶的手勢之間可能存在干擾。因此，目前亟需一種設(shè)備控制方案，以解決上述問題。

發(fā)明內(nèi)容

有鑒于此，本公開至少提供一種設(shè)備控制方法、裝置、電子設(shè)備及存儲介質(zhì)。

第一方面，本公開提供了一種設(shè)備控制方法，包括：

對獲取的第一待檢測圖像進(jìn)行手部檢測，確定與預(yù)設(shè)手勢類別匹配的目標(biāo)手部的手部檢測信息；

基于所述目標(biāo)手部的手部檢測信息，對獲取的第二待檢測圖像中與所述目標(biāo)手部相連的目標(biāo)肢體進(jìn)行肢體跟蹤檢測，并確定所述目標(biāo)手部在所述第二待檢測圖像中的手勢識別結(jié)果；其中，所述第二待檢測圖像為在所述第一待檢測圖像之后獲取到的圖像；

基于所述手勢識別結(jié)果，控制目標(biāo)設(shè)備。

上述方法中，通過對第一待檢測圖像進(jìn)行手部檢測，確定與預(yù)設(shè)手勢類別匹配的目標(biāo)手部的手部檢測信息，并基于目標(biāo)手部的手部檢測信息，對獲取的第二待檢測圖像中與目標(biāo)手部相連的目標(biāo)肢體進(jìn)行肢體跟蹤檢測，確定目標(biāo)手部在第二待檢測圖像中的手勢識別結(jié)果。這樣可以借助肢體跟蹤來實現(xiàn)對不易跟蹤檢測的目標(biāo)手部的追蹤，進(jìn)而可以基于手勢識別結(jié)果，控制目標(biāo)設(shè)備。在諸多用戶的手部中，或是在同一用戶的兩個手部中，通過鎖定目標(biāo)手部，并借助肢體與手部之間的唯一匹配性，以跟蹤目標(biāo)手部為目的進(jìn)行了肢體跟蹤，并以肢體跟蹤結(jié)果為依據(jù)，得到目標(biāo)手部在第二待檢測圖像中的手勢識別結(jié)果，從而有效緩解除目標(biāo)手部對應(yīng)的目標(biāo)用戶之外的其他用戶的手部動作，對目標(biāo)用戶控制目標(biāo)設(shè)備產(chǎn)生的干擾，提高了目標(biāo)設(shè)備的控制精準(zhǔn)度。

由此可見，采用本公開提供的技術(shù)方案，可以有效甄別多個用戶中用于控制目標(biāo)設(shè)備的目標(biāo)用戶，并在一定程度上，當(dāng)目標(biāo)用戶的兩個手部都存在手部動作的情況下，擇一確定目標(biāo)手部，以對目標(biāo)設(shè)備進(jìn)行準(zhǔn)確控制。需要說明的是，若部分控制操作是通過用戶的兩個手部分別執(zhí)行相應(yīng)動作來觸控的，那么采用本公開提供的技術(shù)方案可以鎖定目標(biāo)用戶，并基于目標(biāo)用戶的兩個手部對應(yīng)的手部動作來實現(xiàn)目標(biāo)設(shè)備的控制。

一種可能的實施方式中，在所述基于所述手勢識別結(jié)果，控制目標(biāo)設(shè)備之前，還包括：

檢測所述目標(biāo)手部是否滿足截止條件；

在檢測到所述目標(biāo)手部滿足截止條件的情況下，在所述第二待檢測圖像中，重新確定與所述預(yù)設(shè)手勢類別匹配的目標(biāo)手部的手部檢測信息。

這里，在檢測到目標(biāo)手部滿足截止條件時，表征該目標(biāo)用戶的目標(biāo)手部不再對目標(biāo)設(shè)備進(jìn)行控制，則可以重新確定與預(yù)設(shè)手勢類別匹配的目標(biāo)手部的手部檢測信息，使得第二待檢測圖像中的至少一個用戶可以實時的控制目標(biāo)設(shè)備。

一種可能的實施方式中，所述目標(biāo)手部滿足所述截止條件包括以下一種或多種：