[發(fā)明專利]一種人臉追蹤的方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201611248067.2
• 申請(qǐng)日: 2016-12-29
• 公開(kāi)（公告）號(hào): CN106650682B
• 公開(kāi)（公告）日: 2020-05-01
• 發(fā)明（設(shè)計(jì)）人: 張鉑翼
• 申請(qǐng)（專利權(quán)）人: TCL集團(tuán)股份有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00
• 代理公司: 深圳中一專利商標(biāo)事務(wù)所 44237
• 代理人: 張娜

本發(fā)明適用于圖像檢測(cè)技術(shù)領(lǐng)域，提供了一種人臉追蹤的方法及裝置，包括：獲取人臉檢測(cè)框在上一圖像幀中的圖像位置；在當(dāng)前圖像幀中，定位出相同所述圖像位置的區(qū)域；將所述當(dāng)前圖像幀中定位出的區(qū)域內(nèi)的圖像與所述人臉檢測(cè)框中人臉的正面模板進(jìn)行人臉對(duì)齊，獲取所述當(dāng)前圖像中所述人臉的特征點(diǎn)位置；根據(jù)獲取到的所述特征點(diǎn)位置，在所述當(dāng)前圖像幀中確定出人臉檢測(cè)框。本發(fā)明對(duì)視頻圖像進(jìn)行人臉追蹤時(shí)不需要對(duì)視頻中每幀圖像都進(jìn)行全局檢測(cè)，減少了對(duì)視頻人臉追蹤的運(yùn)算量，提高了處理效率，降低了視頻清晰度對(duì)處理的影響程度。

技術(shù)領(lǐng)域

本發(fā)明屬于圖像檢測(cè)領(lǐng)域，尤其涉及一種人臉追蹤的方法及裝置。

背景技術(shù)

人臉追蹤技術(shù)是基于人的面部特征信息，對(duì)攝像機(jī)采集的視頻中人臉位置和面部特征進(jìn)行追蹤的一種人臉檢測(cè)技術(shù)。如圖1所示，人臉在圖像上的位置通常有三種類型：抬頭或低頭引起的面部俯仰，向左或向右扭頭引起的面部偏航，和向左或向右歪頭引起的面部翻滾。其中面部翻滾是指人臉以人臉?biāo)谄矫娴姆ㄏ蛄繛檩S進(jìn)行一定角度的旋轉(zhuǎn)。

目前人臉追蹤研究工作的對(duì)象主要是正面或接近正面的人臉圖像，即通過(guò)人臉對(duì)齊(Face Alignment)算法對(duì)如圖2所示的正面人臉圖像進(jìn)行人臉追蹤和對(duì)齊。當(dāng)正面人臉有較小偏轉(zhuǎn)時(shí)該算法仍然能夠準(zhǔn)確的進(jìn)行追蹤和對(duì)齊。對(duì)于面部俯仰和面部偏航，一般人臉旋轉(zhuǎn)角度較小，人臉橫向和縱向的紋理變化不大，可以直接使用人臉對(duì)齊算法進(jìn)行人臉追蹤。但對(duì)于面部翻滾，有時(shí)人臉旋轉(zhuǎn)角度較大，可以進(jìn)行360度旋轉(zhuǎn)，例如當(dāng)人倒立時(shí)面部翻滾的角度為180度。此時(shí)，人臉橫向和縱向紋理變化太大，不能直接使用人臉對(duì)齊算法進(jìn)行追蹤。這種情況下，需要首先檢測(cè)面部翻滾的角度，然后根據(jù)面部翻滾的角度將整幅圖像進(jìn)行相應(yīng)的旋轉(zhuǎn)，使圖像中的人臉成為正面人臉，最后利用人臉對(duì)齊算法對(duì)該旋轉(zhuǎn)后的圖像進(jìn)行人臉追蹤和對(duì)齊。

這種人臉追蹤方法，需要對(duì)視頻的每幀圖像全局做人臉檢測(cè)，通過(guò)人臉對(duì)齊算法實(shí)現(xiàn)人臉的追蹤和對(duì)齊，運(yùn)算量大。當(dāng)面部翻滾角度較大時(shí)，需要先對(duì)整幅圖像進(jìn)行旋轉(zhuǎn)才能使用人臉對(duì)齊算法，這樣又極大的增加了對(duì)該幀圖像中人臉進(jìn)行追蹤的運(yùn)算量。而且隨著視頻中清晰度的提高，每幀圖像的人臉追蹤運(yùn)算量也會(huì)相應(yīng)增大。例如，目前在PC上對(duì)1920×1080的高清視頻進(jìn)行處理，每幀圖像需要十幾毫秒到一百毫秒以上。在手機(jī)和相機(jī)等手持設(shè)備上對(duì)視頻人臉追蹤的處理速度無(wú)法到達(dá)30FPS的實(shí)時(shí)性要求，容易造成視頻播放卡頓。

綜上所述，目前對(duì)視頻的人臉追蹤方法運(yùn)算量大，占用系統(tǒng)資源多，處理效率低，容易造成視頻播放卡頓，且處理速度受面部翻滾角度和視頻清晰度的影響。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例的目的在于提供一種人臉追蹤的方法，旨在解決目前對(duì)視頻的人臉追蹤方法運(yùn)算量大，占用系統(tǒng)資源多，處理效率低的問(wèn)題。

本發(fā)明實(shí)施例是這樣實(shí)現(xiàn)的，一種人臉追蹤的方法，包括：

獲取人臉檢測(cè)框在上一圖像幀中的圖像位置；

在當(dāng)前圖像幀中，定位出相同所述圖像位置的區(qū)域；

將所述當(dāng)前圖像幀中定位出的區(qū)域內(nèi)的圖像與所述人臉檢測(cè)框中人臉的正面模板進(jìn)行人臉對(duì)齊，獲取所述當(dāng)前圖像中所述人臉的特征點(diǎn)位置；

根據(jù)獲取到的所述特征點(diǎn)位置，在所述當(dāng)前圖像幀中確定出人臉檢測(cè)框。

本發(fā)明實(shí)施例的另一目的在于提供一種人臉追蹤的裝置，包括：

獲取單元，用于獲取人臉檢測(cè)框在上一圖像幀中的圖像位置；

定位單元，用于在當(dāng)前圖像幀中，定位出相同所述圖像位置的區(qū)域；

對(duì)齊單元，用于將所述當(dāng)前圖像幀中定位出的區(qū)域內(nèi)的圖像與所述人臉檢測(cè)框中人臉的正面模板進(jìn)行人臉對(duì)齊，獲取所述當(dāng)前圖像中所述人臉的特征點(diǎn)位置；

計(jì)算單元，用于根據(jù)獲取到的所述特征點(diǎn)位置，在所述當(dāng)前圖像幀中確定出人臉檢測(cè)框。