[發(fā)明專利]一種人機(jī)交互命令的獲取方法及系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201410290359.7
• 申請(qǐng)日: 2014-06-24
• 公開（公告）號(hào): CN104049760B
• 公開（公告）日: 2017-08-25
• 發(fā)明（設(shè)計(jì)）人: 趙顏果;吳偉;宋展;馬麗婭;王志國(guó);喻召福;丁宏;張曼華;王坤鵬;陳瀅;李曉榕;吳廣生;張威軼
• 申請(qǐng)（專利權(quán)）人: 深圳先進(jìn)技術(shù)研究院
• 主分類號(hào): G06F3/01
• 分類號(hào): G06F3/01;G06K9/00
• 代理公司: 深圳中一專利商標(biāo)事務(wù)所44237
• 代理人: 張全文

1.一種人機(jī)交互命令獲取方法，其特征在于，所述方法包括：

獲取視頻圖像；

根據(jù)所述視頻圖像獲取所述視頻圖像中的人臉位置信息和人手信息，所述人手信息包括：人手形狀信息和人手位置信息；

通過(guò)跟蹤所述人手信息判斷是否形成預(yù)定義的靜止手勢(shì)，如果判斷形成所述預(yù)定義的靜止手勢(shì)，則根據(jù)所述人臉信息和所述人手信息，生成人臉和人手的位置關(guān)系；

根據(jù)所述位置關(guān)系生成交互手勢(shì)；

根據(jù)所述交互手勢(shì)獲取對(duì)應(yīng)的人機(jī)交互命令；

所述根據(jù)所述視頻圖像獲取所述視頻圖像中的人臉位置信息和人手信息的步驟包括：

確定人臉位置；

根據(jù)所述人臉位置確定人手的可移動(dòng)區(qū)域；

在所述可移動(dòng)區(qū)域獲取所述人手信息；

所述在所述可移動(dòng)區(qū)域獲取所述人手信息的步驟包括：

預(yù)設(shè)第一時(shí)間閾值Ns，第二時(shí)間閾值Nns，所述第一時(shí)間閾值Ns小于第二時(shí)間閾值Nns；

判斷當(dāng)前圖像幀是否需要進(jìn)行全局檢測(cè)，所述全局檢測(cè)為：在所述可移動(dòng)區(qū)域內(nèi)檢測(cè)人手的位置和人手的所有形狀；

當(dāng)需要進(jìn)行全局檢測(cè)時(shí)，判斷是否需要進(jìn)行基于膚色信息的全局檢測(cè)；

如果判斷不需要進(jìn)行基于膚色信息的全局檢測(cè)，則在所述可移動(dòng)區(qū)域?qū)︻A(yù)定義的人手形狀進(jìn)行檢測(cè)獲取所述人手信息；或者，

如果判斷需要進(jìn)行基于膚色信息的全局檢測(cè)，則在所述可移動(dòng)區(qū)域進(jìn)行膚色分析，獲取包含膚色信息的區(qū)域，在所述包含膚色信息的區(qū)域?qū)︻A(yù)定義的人手形狀進(jìn)行檢測(cè)獲取所述人手信息；

所述判斷當(dāng)前圖像幀是否需要進(jìn)行全局檢測(cè)包括：

判斷當(dāng)前圖像幀距離上一次進(jìn)行局部檢測(cè)的時(shí)間是否大于所述第一時(shí)間閾值Ns，若大于，則當(dāng)前圖像幀需要進(jìn)行全局檢測(cè)；

所述需要進(jìn)行基于膚色信息的全局檢測(cè)的條件是：

如果當(dāng)前圖像幀距離上一次不基于膚色信息的全局檢測(cè)的時(shí)間大于第二時(shí)間閾值Nns，則當(dāng)前圖像幀使用不基于膚色信息的全局檢測(cè)；或者，

如果當(dāng)前圖像幀跟蹤的人手發(fā)生永久丟失，則當(dāng)前圖像幀使用不基于膚色信息的全局檢測(cè)。

2.如權(quán)利要求1所述的方法，其特征在于，在所述根據(jù)所述視頻圖像獲取所述視頻圖像中的人臉位置信息和人手信息的步驟之前，所述方法還包括以下步驟：

獲取膚色信息，建立在線膚色模型。

3.如權(quán)利要求1所述的方法，其特征在于，所述通過(guò)跟蹤所述人手信息判斷是否形成預(yù)定義的靜止手勢(shì)的步驟，具體為：根據(jù)公式計(jì)算是否形成預(yù)定義的靜止手勢(shì)，

(a)、AccD(t)-AccD(t-N)>θ₁N，θ₁∈(0，1)；

(b)、max_i{AccD(i，t)-AccD(i，t-N)}>θ₂N，θ₂∈(0，1)；

(c)、α∈(0，1)，β∈(0,1]，

其中N，θ₁，θ₂，α，β是預(yù)定義的參數(shù)，其中N是使用的圖像幀的數(shù)量，是最近N幀檢測(cè)結(jié)果的均值位置，根據(jù)公式計(jì)算獲得，其中代表所檢測(cè)到的人手累積位置，代表檢測(cè)到目標(biāo)人手的圖像幀的數(shù)量，代表檢測(cè)到第k種手勢(shì)，和分別代表第i幀中手部矩形區(qū)域的左上角坐標(biāo)和右下角坐標(biāo)，E⁽ⁱ⁾代表第i幀圖像中是否存在目標(biāo)人手，p⁽ⁱ⁾∈{0，1，…，M}代表第i幀的手形類別，其中AccP(t)＝AccP(t-1)+Loc(t)，AccD(t)＝AccD(t-1)+E^(t)，AccD(i，t)＝AccD(i，t-1)+(p^(t)＝＝i)。