[發(fā)明專利]一種設(shè)備的控制方法、裝置、計(jì)算機(jī)設(shè)備和介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010186785.1
• 申請(qǐng)日: 2020-03-17
• 公開(kāi)（公告）號(hào): CN111367415A
• 公開(kāi)（公告）日: 2020-07-03
• 發(fā)明（設(shè)計(jì)）人: 何吉波;譚北平;譚志鵬
• 申請(qǐng)（專利權(quán)）人: 北京明略軟件系統(tǒng)有限公司;清華大學(xué)
• 主分類號(hào): G06F3/01
• 分類號(hào): G06F3/01;G06F3/0487;G06K9/00
• 代理公司: 北京超成律師事務(wù)所 11646
• 代理人: 吳迪

本申請(qǐng)?zhí)峁┝艘环N設(shè)備的控制方法、裝置、計(jì)算機(jī)設(shè)備和介質(zhì)，所述方法，包括：獲取用于控制目標(biāo)設(shè)備的目標(biāo)視頻；根據(jù)所述目標(biāo)視頻中指定的多幀圖像，確定在所述目標(biāo)視頻中所出現(xiàn)的手勢(shì)樣式和手勢(shì)運(yùn)動(dòng)軌跡；根據(jù)所述手勢(shì)樣式和所述手勢(shì)運(yùn)動(dòng)軌跡，確定所述目標(biāo)視頻相對(duì)應(yīng)的控制指令；根據(jù)所述控制指令，對(duì)所述目標(biāo)設(shè)備進(jìn)行控制。本申請(qǐng)的實(shí)施例，在獲取的視頻中確定手勢(shì)樣式和手勢(shì)運(yùn)動(dòng)軌跡，根據(jù)確定的手勢(shì)樣式和手勢(shì)運(yùn)動(dòng)軌跡來(lái)確定控制指令，以對(duì)目標(biāo)設(shè)備進(jìn)行控制，不需要用戶再佩戴與目標(biāo)設(shè)備相匹配的數(shù)據(jù)手套，減少了對(duì)目標(biāo)設(shè)備進(jìn)行控制的繁瑣步驟，提高了對(duì)目標(biāo)設(shè)備進(jìn)行控制的便捷性。

技術(shù)領(lǐng)域

本申請(qǐng)涉及智能識(shí)別領(lǐng)域，具體而言，涉及一種設(shè)備的控制方法、裝置、計(jì)算機(jī)設(shè)備和介質(zhì)。

背景技術(shù)

隨著科技的發(fā)展，遠(yuǎn)程控制也逐漸的走入人們的視野，遠(yuǎn)程控制可以實(shí)現(xiàn)人與設(shè)備的交互，在人不接觸設(shè)備的情況下，讓設(shè)備根據(jù)人的指令進(jìn)行工作，遠(yuǎn)程控制可以在很大程度上提高人們的生產(chǎn)力，提高工作效率。

一般，人們通過(guò)佩戴數(shù)據(jù)手套來(lái)實(shí)現(xiàn)遠(yuǎn)程控制。在數(shù)據(jù)手套上設(shè)置多個(gè)傳感器，通過(guò)傳感器可以將佩戴有數(shù)據(jù)手套的手所做的手勢(shì)識(shí)別出來(lái)，根據(jù)識(shí)別出來(lái)的手勢(shì)遠(yuǎn)程控制所對(duì)應(yīng)的設(shè)備。上述控制設(shè)備的方法，需要佩戴指定的數(shù)據(jù)手套，在沒(méi)有指定數(shù)據(jù)手套的情況下對(duì)設(shè)備并不能實(shí)現(xiàn)控制，降低了對(duì)設(shè)備進(jìn)行控制的便捷性。

發(fā)明內(nèi)容

有鑒于此，本申請(qǐng)的目的在于提供一種設(shè)備的控制方法、裝置、計(jì)算機(jī)設(shè)備和介質(zhì)，用于解決現(xiàn)有技術(shù)中如何對(duì)設(shè)備進(jìn)行遠(yuǎn)程控制的便捷性的問(wèn)題。

第一方面，本申請(qǐng)實(shí)施例提供了一種設(shè)備的控制方法，包括：

獲取用于控制目標(biāo)設(shè)備的目標(biāo)視頻；

根據(jù)所述目標(biāo)視頻中指定的多幀圖像，確定在所述目標(biāo)視頻中所出現(xiàn)的手勢(shì)樣式和手勢(shì)運(yùn)動(dòng)軌跡；

根據(jù)所述手勢(shì)樣式和所述手勢(shì)運(yùn)動(dòng)軌跡，確定所述目標(biāo)視頻相對(duì)應(yīng)的控制指令；

根據(jù)所述控制指令，對(duì)所述目標(biāo)設(shè)備進(jìn)行控制。

可選的，在獲取作用于機(jī)械設(shè)備的目標(biāo)視頻之后，在根據(jù)所述目標(biāo)視頻中指定的多幀圖像，確定在所述目標(biāo)視頻中所出現(xiàn)的手勢(shì)樣式和手勢(shì)運(yùn)動(dòng)軌跡之前，還包括：

針對(duì)目標(biāo)視頻中的每幀圖像，基于該圖像中每個(gè)部分的顏色值進(jìn)行前景提取，以確定該幀圖像中手所在的區(qū)域圖像；

根據(jù)所述目標(biāo)視頻的每幀圖像中手所在的區(qū)域圖像的面積，確定所述目標(biāo)視頻是否為有效目標(biāo)視頻。

可選的，所述根據(jù)所述目標(biāo)視頻中指定的多幀圖像，確定在所述目標(biāo)視頻中所出現(xiàn)的手勢(shì)樣式和手勢(shì)運(yùn)動(dòng)軌跡，包括：

針對(duì)所述目標(biāo)視頻中每幀圖像，確定該幀圖像中手的輪廓和定位點(diǎn)的位置信息；

根據(jù)每一幀圖像中手的輪廓與候選標(biāo)準(zhǔn)手勢(shì)輪廓的相似度，確定所述手勢(shì)樣式；

根據(jù)每一幀圖像中定位點(diǎn)的位置信息和時(shí)間信息，確定所述手勢(shì)運(yùn)動(dòng)軌跡。

可選的，所述定位點(diǎn)位置包括以下位置的任意一種或多種：

拇指指尖位置、食指指尖位置、中指指尖位置、無(wú)名指指尖位置、小拇指指尖位置和質(zhì)心位置。

可選的，在根據(jù)所述手勢(shì)樣式和所述手勢(shì)運(yùn)動(dòng)軌跡，確定所述目標(biāo)視頻相對(duì)應(yīng)的控制指令之后，在根據(jù)所述控制指令，對(duì)所述機(jī)械設(shè)備進(jìn)行控制之前，還包括：

將所述控制指令發(fā)送至用戶終端，以使所述用戶終端按照消息提示方式將所述控制指令進(jìn)行提示；

接收所述用戶終端針對(duì)提示的所述控制指令的答復(fù)指令。

可選的，所述消息提示方式包括以下方式中的任意一種或多種：