[發(fā)明專利]一種人臉關(guān)鍵點(diǎn)跟蹤方法和裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201611121387.1
• 申請(qǐng)日: 2016-12-08
• 公開（公告）號(hào): CN106778585B
• 公開（公告）日: 2019-04-16
• 發(fā)明（設(shè)計(jì)）人: 汪鋮杰;倪輝;趙艷丹;王亞彪;丁守鴻;李紹欣;趙凌;李季檁;吳永堅(jiān);黃飛躍;梁亦聰
• 申請(qǐng)（專利權(quán)）人: 騰訊科技（上海）有限公司
• 主分類號(hào): G06T7/246
• 分類號(hào): G06T7/246
• 代理公司: 深圳翼盛智成知識(shí)產(chǎn)權(quán)事務(wù)所(普通合伙) 44300
• 代理人: 黃威

本發(fā)明實(shí)施例公開了一種人臉關(guān)鍵點(diǎn)跟蹤方法和裝置；本發(fā)明實(shí)施例可以通過獲取上一幀圖像的人臉關(guān)鍵點(diǎn)坐標(biāo)和置信度，來推算當(dāng)前幀的人臉關(guān)鍵點(diǎn)坐標(biāo)，然后，根據(jù)當(dāng)前幀的人臉關(guān)鍵點(diǎn)坐標(biāo)對(duì)當(dāng)前幀進(jìn)行多人臉識(shí)別、以及對(duì)當(dāng)前幀相應(yīng)的置信度進(jìn)行計(jì)算，以供下一幀圖像進(jìn)行參考，如此循環(huán)，直至對(duì)視頻流中的所有圖像均識(shí)別完畢，從而實(shí)現(xiàn)實(shí)時(shí)地對(duì)視頻流中的人臉關(guān)鍵點(diǎn)進(jìn)行跟蹤的目的；該方案不僅可以大大減少檢測(cè)的時(shí)間，提高處理效率，而且，也可以減少資源的消耗，有利于在移動(dòng)終端實(shí)現(xiàn)實(shí)時(shí)計(jì)算。

技術(shù)領(lǐng)域

本發(fā)明涉及通信技術(shù)領(lǐng)域，具體涉及一種人臉關(guān)鍵點(diǎn)跟蹤方法和裝置。

背景技術(shù)

隨著計(jì)算機(jī)和圖像處理等技術(shù)的高速發(fā)展，人臉識(shí)別技術(shù)也得到了長(zhǎng)足的進(jìn)步；人臉識(shí)別不僅可以用在圖像處理上，而且，也可以應(yīng)用在身份鑒別等領(lǐng)域，因此，近些年來，人臉識(shí)別也一直是研究的一個(gè)熱點(diǎn)。

人臉關(guān)鍵點(diǎn)的檢測(cè)是人臉識(shí)別的基礎(chǔ)，為了能夠準(zhǔn)確地識(shí)別出視頻流中的人臉，需要對(duì)視頻流中的每一個(gè)人臉進(jìn)行人臉關(guān)鍵點(diǎn)跟蹤。所謂人臉關(guān)鍵點(diǎn)，指的是能夠反映人臉特征的信息，比如眼睛、眉毛、鼻子、嘴巴、以及臉部外輪廓等。在現(xiàn)有技術(shù)中，一般會(huì)采用逐幀人臉檢測(cè)法來對(duì)視頻流中進(jìn)行人臉關(guān)鍵點(diǎn)跟蹤，即對(duì)于視頻流中的每一幀做人臉檢測(cè)，并對(duì)檢測(cè)到的每一個(gè)人臉使用人臉關(guān)鍵點(diǎn)定位算法來定位人臉關(guān)鍵點(diǎn)位置，從而達(dá)到多人臉人臉關(guān)鍵點(diǎn)跟蹤的效果。

在對(duì)現(xiàn)有技術(shù)的研究和實(shí)踐過程中，本發(fā)明的發(fā)明人發(fā)現(xiàn)，在現(xiàn)有方案中，由于所采用的人臉檢測(cè)算法較為耗時(shí)，因此，不僅處理效率較低，而且，需要消耗較多的資源，在移動(dòng)終端無法達(dá)到實(shí)時(shí)計(jì)算。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例提供一種人臉關(guān)鍵點(diǎn)跟蹤方法和裝置，不僅可以減少檢測(cè)時(shí)間，提高處理效率，而且，可以節(jié)省資源消耗，可以在移動(dòng)終端進(jìn)行實(shí)時(shí)計(jì)算。

本發(fā)明實(shí)施例提供一種人臉關(guān)鍵點(diǎn)跟蹤方法，包括：

在視頻流中獲取當(dāng)前需要處理的圖像，得到當(dāng)前幀；

獲取當(dāng)前幀的上一幀圖像的人臉關(guān)鍵點(diǎn)坐標(biāo)、以及所述上一幀圖像的人臉關(guān)鍵點(diǎn)坐標(biāo)的置信度；

在置信度高于預(yù)設(shè)閾值時(shí)，根據(jù)所述上一幀圖像的人臉關(guān)鍵點(diǎn)坐標(biāo)計(jì)算當(dāng)前幀的人臉關(guān)鍵點(diǎn)坐標(biāo)；

根據(jù)當(dāng)前幀的人臉關(guān)鍵點(diǎn)坐標(biāo)對(duì)當(dāng)前幀進(jìn)行多人臉識(shí)別，以及計(jì)算當(dāng)前幀的人臉關(guān)鍵點(diǎn)坐標(biāo)的置信度，并返回執(zhí)行在視頻流中獲取當(dāng)前需要處理的圖像的步驟，直至視頻流中的圖像均識(shí)別完畢。

本發(fā)明實(shí)施例還提供一種人臉關(guān)鍵點(diǎn)跟蹤裝置，包括：

圖像獲取單元，用于在視頻流中獲取當(dāng)前需要處理的圖像，得到當(dāng)前幀；

參數(shù)獲取單元，用于獲取當(dāng)前幀的上一幀圖像的人臉關(guān)鍵點(diǎn)坐標(biāo)、以及所述上一幀圖像的人臉關(guān)鍵點(diǎn)坐標(biāo)的置信度；

運(yùn)算單元，用于在置信度高于預(yù)設(shè)閾值時(shí)，根據(jù)所述上一幀圖像的人臉關(guān)鍵點(diǎn)坐標(biāo)計(jì)算當(dāng)前幀的人臉關(guān)鍵點(diǎn)坐標(biāo)；

處理單元，用于根據(jù)當(dāng)前幀的人臉關(guān)鍵點(diǎn)坐標(biāo)對(duì)當(dāng)前幀進(jìn)行多人臉識(shí)別，以及計(jì)算當(dāng)前幀的人臉關(guān)鍵點(diǎn)坐標(biāo)的置信度，并觸發(fā)圖像獲取單元執(zhí)行在視頻流中獲取當(dāng)前需要處理的圖像的操作，直至視頻流中的圖像均識(shí)別完畢。

本發(fā)明實(shí)施例可以通過獲取上一幀圖像的人臉關(guān)鍵點(diǎn)坐標(biāo)和置信度，來推算當(dāng)前幀的人臉關(guān)鍵點(diǎn)坐標(biāo)，然后，根據(jù)當(dāng)前幀的人臉關(guān)鍵點(diǎn)坐標(biāo)對(duì)當(dāng)前幀進(jìn)行多人臉識(shí)別、以及對(duì)當(dāng)前幀相應(yīng)的置信度進(jìn)行計(jì)算，以供下一幀圖像進(jìn)行參考，如此循環(huán)，直至對(duì)視頻流中的所有圖像均識(shí)別完畢，從而實(shí)現(xiàn)實(shí)時(shí)地對(duì)視頻流中的人臉關(guān)鍵點(diǎn)進(jìn)行跟蹤的目的；由于該方案在計(jì)算當(dāng)前幀的人臉關(guān)鍵點(diǎn)坐標(biāo)時(shí)，可以參考上一幀的識(shí)別結(jié)果，而無需逐幀進(jìn)行檢測(cè)，因此，相對(duì)于現(xiàn)有需要逐幀進(jìn)行檢測(cè)的方案而言，不僅可以大大減少檢測(cè)的時(shí)間，提高處理效率，而且，也可以減少資源的消耗，有利于在移動(dòng)終端實(shí)現(xiàn)實(shí)時(shí)計(jì)算。

附圖說明