[發(fā)明專利]一種圖像處理方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201710075865.8
• 申請(qǐng)日: 2017-02-13
• 公開(kāi)（公告）號(hào): CN108428214B
• 公開(kāi)（公告）日: 2022-03-08
• 發(fā)明（設(shè)計(jì)）人: 徐冉;唐振
• 申請(qǐng)（專利權(quán)）人: 斑馬智行網(wǎng)絡(luò)(香港)有限公司
• 主分類號(hào): G06T5/00
• 分類號(hào): G06T5/00;G06T5/50
• 代理公司: 上海知錦知識(shí)產(chǎn)權(quán)代理事務(wù)所(特殊普通合伙) 31327
• 代理人: 潘彥君

1.一種圖像處理方法，其特征在于，所述方法包括：

獲取第一圖像；

檢測(cè)得到所述第一圖像中的人臉，確定所述人臉中的目標(biāo)特征的檢測(cè)區(qū)域，所述目標(biāo)特征為所述人臉的皮膚上具有一定形狀的區(qū)域且該區(qū)域的亮度不同于人臉皮膚的亮度；

針對(duì)所述目標(biāo)特征檢測(cè)區(qū)域，根據(jù)檢測(cè)模板對(duì)待檢測(cè)像素以及所述待檢測(cè)像素周圍的像素的亮度進(jìn)行比較，確定出所述人臉上的第一目標(biāo)特征；其中，所述檢測(cè)模板為M×N像素塊，所述像素塊中包括一個(gè)位于所述像素塊中部的第一像素以及分布于所述像素塊邊緣的多個(gè)第二像素，所述第一像素用于對(duì)應(yīng)待檢測(cè)像素，所述多個(gè)第二像素用于對(duì)應(yīng)待檢測(cè)像素周圍的像素，M和N均為大于1的整數(shù)；

對(duì)確定出的第一目標(biāo)特征所在的區(qū)域進(jìn)行膚色填充，包括：

針對(duì)確定出的第一目標(biāo)特征，確定膚色填充區(qū)域；

對(duì)所述膚色填充區(qū)域邊界上的像素進(jìn)行間隔采樣得到采樣點(diǎn)，根據(jù)所述采樣點(diǎn)將所述膚色填充區(qū)域網(wǎng)格化，一條網(wǎng)格線與所述膚色填充區(qū)域邊界上的兩個(gè)交叉點(diǎn)分別為所述采樣點(diǎn)中的兩個(gè)采樣點(diǎn)；

針對(duì)任意一個(gè)網(wǎng)格線交叉點(diǎn)，根據(jù)交叉點(diǎn)與每個(gè)采樣點(diǎn)的距離分別確定每個(gè)采樣點(diǎn)的權(quán)重，確定所有采樣點(diǎn)的顏色值與對(duì)應(yīng)的權(quán)重的第一加權(quán)平均值，根據(jù)所述第一加權(quán)平均值設(shè)置交叉點(diǎn)的顏色值，其中，一個(gè)采樣點(diǎn)對(duì)應(yīng)的權(quán)重與該采樣點(diǎn)到交叉點(diǎn)的距離成反比；

針對(duì)每個(gè)網(wǎng)格內(nèi)的任一待填充像素，根據(jù)待填充像素與網(wǎng)格的每個(gè)頂點(diǎn)的距離分別確定每個(gè)頂點(diǎn)的權(quán)重，確定每個(gè)頂點(diǎn)的顏色值與對(duì)應(yīng)的權(quán)重的第二加權(quán)平均值，根據(jù)所述第二加權(quán)平均值設(shè)置待填充像素的顏色值，其中，一個(gè)網(wǎng)格頂點(diǎn)對(duì)應(yīng)的權(quán)重與該網(wǎng)格頂點(diǎn)到待填充像素的距離成反比。

2.如權(quán)利要求1所述的方法，其特征在于，檢測(cè)得到所述第一圖像中的人臉，確定所述人臉中的目標(biāo)特征的檢測(cè)區(qū)域，包括：

對(duì)所述第一圖像進(jìn)行人臉檢測(cè)，得到人臉輪廓點(diǎn)與器官點(diǎn)；

根據(jù)所述人臉輪廓點(diǎn)與所述器官點(diǎn)，確定所述人臉中的目標(biāo)特征的檢測(cè)區(qū)域；其中，所述檢測(cè)區(qū)域?yàn)樵谒鋈四樰喞卣鼽c(diǎn)所描繪的人臉區(qū)域內(nèi)，排除所述器官點(diǎn)所描繪的器官所在區(qū)域。

3.如權(quán)利要求1所述的方法，其特征在于，根據(jù)檢測(cè)模板對(duì)待檢測(cè)像素以及所述待檢測(cè)像素周圍的像素的亮度進(jìn)行比較，確定出所述人臉上的第一目標(biāo)特征，包括：

針對(duì)所述檢測(cè)區(qū)域內(nèi)的任一待檢測(cè)像素，執(zhí)行：將所述檢測(cè)模板中第一像素與待檢測(cè)像素對(duì)齊，根據(jù)所述檢測(cè)模板中的第二像素，確定所述檢測(cè)區(qū)域中對(duì)應(yīng)位置的像素的亮度值，若所述待檢測(cè)像素的亮度值小于所述檢測(cè)區(qū)域中相應(yīng)位置的每個(gè)像素的亮度值，且后者減去前者的差值均大于設(shè)定閾值，則確定所述待檢測(cè)像素為第一目標(biāo)特征所在區(qū)域內(nèi)的像素；

根據(jù)被檢測(cè)為第一目標(biāo)特征所在區(qū)域內(nèi)的像素，得到所述檢測(cè)區(qū)域內(nèi)的第一目標(biāo)特征。

4.如權(quán)利要求1至3中任一項(xiàng)所述的方法，其特征在于，確定出所述人臉上的第一目標(biāo)特征之后，還包括：

確定所述第一目標(biāo)特征的邊緣像素的梯度方向，統(tǒng)計(jì)每個(gè)梯度方向?qū)?yīng)的像素個(gè)數(shù)，并計(jì)算所述像素個(gè)數(shù)的方差，若所述方差大于設(shè)定閾值，則過(guò)濾掉所述第一目標(biāo)特征；或者，

使用基于目標(biāo)特征樣本訓(xùn)練得到的分類器，對(duì)所述第一目標(biāo)特征進(jìn)行過(guò)濾。

5.如權(quán)利要求1至3中任一項(xiàng)所述的方法，其特征在于，所述第一圖像為視頻幀序列中的第一視頻幀；

獲取所述視頻幀序列中的第二視頻幀中的第二目標(biāo)特征與所述人臉關(guān)鍵點(diǎn)之間的相對(duì)位置；其中，所述第二視頻幀為所述第一視頻幀的前一視頻幀，所述第二目標(biāo)特征與所述第一目標(biāo)特征對(duì)應(yīng)；

根據(jù)所述第二視頻幀中所述第二目標(biāo)特征與所述人臉關(guān)鍵點(diǎn)之間的相對(duì)位置以及所述第一視頻幀中所述人臉關(guān)鍵點(diǎn)的位置，預(yù)估所述第一視頻幀中人臉上的第一目標(biāo)特征的位置；

若預(yù)估出的所述人臉上第一目標(biāo)特征的位置與確定出的所述人臉上第一目標(biāo)特征的位置的差異大于預(yù)設(shè)值，則過(guò)濾掉所述第一視頻幀中的所述第一目標(biāo)特征。

6.如權(quán)利要求1至3中任一項(xiàng)所述的方法，其特征在于，獲取第一圖像，包括：拍攝得到第一圖像；

對(duì)確定出的第一目標(biāo)特征所在的區(qū)域進(jìn)行膚色填充之后，還包括：將膚色填充后的第一圖像進(jìn)行顯示。