[發(fā)明專利]基于手部識(shí)別的拍攝主體識(shí)別方法和系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 202011640184.X
• 申請(qǐng)日: 2020-12-31
• 公開（公告）號(hào): CN112839172B
• 公開（公告）日: 2022-02-18
• 發(fā)明（設(shè)計(jì)）人: 黃安昊;李琪
• 申請(qǐng)（專利權(quán)）人: 深圳瞬玩科技有限公司
• 主分類號(hào): H04N5/232
• 分類號(hào): H04N5/232
• 代理公司: 北京久誠(chéng)知識(shí)產(chǎn)權(quán)代理事務(wù)所(特殊普通合伙) 11542
• 代理人: 余罡

本發(fā)明提供了一種基于手部識(shí)別的拍攝主體識(shí)別方法和系統(tǒng)，涉及拍攝主體識(shí)別技術(shù)領(lǐng)域。通過對(duì)圖像中的手部和物品進(jìn)行識(shí)別，得到手部對(duì)應(yīng)的關(guān)節(jié)點(diǎn)和物品的識(shí)別框，并基于每個(gè)手部對(duì)應(yīng)的關(guān)節(jié)點(diǎn)，獲取食指指向?qū)?yīng)的備選指向射線集合作為所有可能的指向，并將與備選指向射線存在交點(diǎn)的物品的識(shí)別框作為所有可能的拍攝主體，最終從中篩選出每個(gè)手部的手指所指的識(shí)別框作為拍攝主體，能夠很好確定手指指向的物品，并考慮到不同備選指向射線的權(quán)重對(duì)于拍攝主體識(shí)別的影響，在不同場(chǎng)景下，判斷食指尖與物品的距離遠(yuǎn)近，進(jìn)而動(dòng)態(tài)的調(diào)節(jié)各個(gè)備選指向射線的權(quán)重，進(jìn)一步提高拍攝主體的識(shí)別準(zhǔn)確度。

技術(shù)領(lǐng)域

本發(fā)明涉及拍攝主體識(shí)別技術(shù)領(lǐng)域，具體涉及一種基于手部識(shí)別的拍攝主體識(shí)別方法和系統(tǒng)。

背景技術(shù)

在生成圖像的預(yù)覽圖時(shí)，往往需要先確定圖中的拍攝主體，再對(duì)拍攝主體進(jìn)行縮放，生成預(yù)覽圖。

但現(xiàn)有的拍攝主體識(shí)別方法通常對(duì)圖像的中心區(qū)域進(jìn)行物品識(shí)別，將識(shí)別結(jié)果作為拍攝主體。

但在實(shí)際拍攝時(shí)，往往拍攝的構(gòu)圖并非是將拍攝主體設(shè)置在中心處，上述方法僅考慮到了局部區(qū)域的物體，并不能從圖像整體上進(jìn)行拍攝主體識(shí)別，容易遺漏其他區(qū)域的信息，存在拍攝主體識(shí)別準(zhǔn)確率不高的問題，因此，將上述方法使用在實(shí)現(xiàn)預(yù)覽圖生成功能時(shí)，容易導(dǎo)致生成的預(yù)覽圖遺漏關(guān)鍵信息。

發(fā)明內(nèi)容

(一)解決的技術(shù)問題

針對(duì)現(xiàn)有技術(shù)的不足，本發(fā)明提供了一種基于手部識(shí)別的拍攝主體識(shí)別方法和系統(tǒng)，解決了現(xiàn)有技術(shù)無法從圖像整體上識(shí)別拍攝主體，存在拍攝主體識(shí)別準(zhǔn)確度不高的問題。

(二)技術(shù)方案

為實(shí)現(xiàn)以上目的，本發(fā)明通過以下技術(shù)方案予以實(shí)現(xiàn)：

第一方面，提供了一種基于手部識(shí)別的拍攝主體識(shí)別方法，該方法包括：

在拍攝時(shí)對(duì)圖像中的手部進(jìn)行識(shí)別，獲取每個(gè)手部的關(guān)節(jié)點(diǎn)；

基于每個(gè)手部對(duì)應(yīng)的關(guān)節(jié)點(diǎn)，獲取食指指向?qū)?yīng)的備選指向射線集合；

對(duì)圖像中的物品進(jìn)行識(shí)別，獲取每個(gè)物品的識(shí)別框；

獲取與每個(gè)手部對(duì)應(yīng)的所述備選指向射線存在交點(diǎn)的識(shí)別框，從中選擇一個(gè)識(shí)別框作為拍攝主體。

進(jìn)一步的，所述識(shí)別框包括矩形識(shí)別框?qū)?yīng)的四個(gè)端點(diǎn)坐標(biāo)；所述關(guān)節(jié)點(diǎn)包括手部21個(gè)關(guān)節(jié)點(diǎn)的坐標(biāo)。

進(jìn)一步的，所述基于每個(gè)手部對(duì)應(yīng)的關(guān)節(jié)點(diǎn)，獲取食指指向?qū)?yīng)的備選指向射線集合，包括：

從關(guān)節(jié)點(diǎn)中獲取食指的關(guān)節(jié)點(diǎn)坐標(biāo)，并按手部張開狀態(tài)下到手腕關(guān)節(jié)點(diǎn)的距離從小至大依次編號(hào)，得到食指關(guān)節(jié)點(diǎn)集合：

P＝{p¹,p²,p³,p⁴}

其中，p¹,p²,p³,p⁴分別表示食指的四個(gè)關(guān)節(jié)點(diǎn)坐標(biāo)；

基于任意兩個(gè)相鄰編號(hào)的關(guān)節(jié)點(diǎn)pⁱ和pⁱ⁺¹構(gòu)建射線函數(shù)

基于p¹,p²,p³,p⁴進(jìn)行直線擬合，構(gòu)建擬合射線函數(shù)

構(gòu)建備選指向射線集合

進(jìn)一步的，所述獲取與每個(gè)手部對(duì)應(yīng)的所述備選指向射線存在交點(diǎn)的識(shí)別框，從中選擇一個(gè)識(shí)別框作為拍攝主體，包括：

對(duì)于任一手部，獲取與備選指向射線存在交點(diǎn)的識(shí)別框集合