[發(fā)明專利]圖像處理方法、系統(tǒng)、設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110740168.6
• 申請(qǐng)日: 2021-06-30
• 公開（公告）號(hào): CN113392801A
• 公開（公告）日: 2021-09-14
• 發(fā)明（設(shè)計(jì)）人: 陳信宇
• 申請(qǐng)（專利權(quán)）人: 深圳市斯博科技有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/34;G06K9/46;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 廣州嘉權(quán)專利商標(biāo)事務(wù)所有限公司 44205
• 代理人: 黃廣龍

本發(fā)明公開了圖像處理方法、系統(tǒng)、設(shè)備及存儲(chǔ)介質(zhì)，方法包括獲取位于目標(biāo)預(yù)測(cè)圖像中第一位置的目標(biāo)預(yù)測(cè)像素點(diǎn)；獲取若干張參考預(yù)測(cè)圖像，并獲取每一張參考預(yù)測(cè)圖像中與第一位置相對(duì)應(yīng)位置的參考預(yù)測(cè)像素點(diǎn)；參考預(yù)測(cè)圖像是目標(biāo)預(yù)測(cè)圖像前后幀的預(yù)測(cè)圖像；選取一個(gè)參考預(yù)測(cè)像素點(diǎn)修正目標(biāo)預(yù)測(cè)圖像中的目標(biāo)預(yù)測(cè)像素點(diǎn)。本方法通過在位于目標(biāo)預(yù)測(cè)圖像前后幀的參考預(yù)測(cè)圖像中選取參考預(yù)測(cè)像素點(diǎn)修正目標(biāo)預(yù)測(cè)像素點(diǎn)，能夠消除模糊像素點(diǎn)，提高摳圖的精確度，提升用戶體驗(yàn)。而且本方法不用太多的CPU運(yùn)算,所以在手機(jī)端這樣的低運(yùn)算裝置上,可以有效的提升摳圖的精確度。

技術(shù)領(lǐng)域

本發(fā)明涉及圖像處理技術(shù)領(lǐng)域，特別涉及一種圖像處理方法、系統(tǒng)、設(shè)備及存儲(chǔ)介質(zhì)。

背景技術(shù)

視頻摳圖是一個(gè)常用于視頻特效上的應(yīng)用,主要是從視頻圖像中移除背景將前景給顯現(xiàn)出來,所謂的前景可以是人,動(dòng)物,天空,汽車,或是畫面中的顯著物體,并沒有一定的規(guī)定。而目前此技術(shù)的產(chǎn)品很多可以從云端的服務(wù)到移動(dòng)端的app上都可以看到,過去因?yàn)樗懔Σ町愐话銇碚f在移動(dòng)端的效果無法讓用戶接受,但是在近年深度學(xué)習(xí)在移動(dòng)端的進(jìn)展和移動(dòng)端的運(yùn)算能力增加,在移動(dòng)端的效果已經(jīng)越來越好,已經(jīng)有很多移動(dòng)端的摳圖相關(guān)應(yīng)用。

在視頻的摳圖過程中,一連串的圖像經(jīng)過摳圖的深度模型算法,因?yàn)槟Ｐ褪菃螐堓斎耄驗(yàn)閯?dòng)作快速移動(dòng)或是光源影響造成摳圖結(jié)果不穩(wěn)定,出現(xiàn)畫面中的人在某一幀身體某一部分突然摳不好,或是背景被誤認(rèn)為前景，用戶會(huì)看到某一幀突然缺一塊的樣子,或是結(jié)果閃爍的狀況，影響用戶體驗(yàn)。

發(fā)明內(nèi)容

本發(fā)明旨在至少解決現(xiàn)有技術(shù)中存在的技術(shù)問題。為此，本發(fā)明提出一種圖像處理方法、系統(tǒng)、設(shè)備及存儲(chǔ)介質(zhì)。能夠消除模糊像素點(diǎn)，提高摳圖的精確度，提升用戶體驗(yàn)。

第一方面，提供了一種圖像處理方法，所述方法包括：

獲取位于目標(biāo)預(yù)測(cè)圖像中第一位置的目標(biāo)預(yù)測(cè)像素點(diǎn)；

獲取若干張參考預(yù)測(cè)圖像，并獲取每一張所述參考預(yù)測(cè)圖像中與所述第一位置相對(duì)應(yīng)位置的參考預(yù)測(cè)像素點(diǎn)；所述參考預(yù)測(cè)圖像是所述目標(biāo)預(yù)測(cè)圖像前后幀的預(yù)測(cè)圖像；

選取一個(gè)所述參考預(yù)測(cè)像素點(diǎn)修正所述目標(biāo)預(yù)測(cè)圖像中的所述目標(biāo)預(yù)測(cè)像素點(diǎn)。

在一些實(shí)施例中，所述獲取位于目標(biāo)預(yù)測(cè)圖像中第一位置的目標(biāo)預(yù)測(cè)像素點(diǎn)之前，所述方法還包括：

將目標(biāo)原始圖像輸入至深度學(xué)習(xí)摳圖模型中，得到所述深度學(xué)習(xí)摳圖模型輸出的目標(biāo)預(yù)測(cè)圖像。

在一些實(shí)施例中，所述獲取若干張參考預(yù)測(cè)圖像，包括：

獲取所述目標(biāo)預(yù)測(cè)圖像前后幀的若干張預(yù)測(cè)圖像以及所述若干張預(yù)測(cè)圖像對(duì)應(yīng)的若干張?jiān)紙D像；

獲取所述原始圖像中與所述第一位置相對(duì)應(yīng)位置的原始像素點(diǎn)以及所述目標(biāo)原始圖像中與所述第一位置相對(duì)應(yīng)位置的目標(biāo)原始像素點(diǎn)；

選取所述原始像素點(diǎn)與所述目標(biāo)原始像素點(diǎn)的顏色相似度在預(yù)設(shè)范圍內(nèi)的所有所述原始圖像；

將所述所有所述原始圖像對(duì)應(yīng)的所有所述預(yù)測(cè)圖像作為所述參考預(yù)測(cè)圖像。

在一些實(shí)施例中，所述選取一個(gè)所述參考預(yù)測(cè)像素點(diǎn)修正所述目標(biāo)預(yù)測(cè)圖像中的所述目標(biāo)預(yù)測(cè)像素點(diǎn)，包括：

獲取所述深度學(xué)習(xí)摳圖模型輸出每一個(gè)所述參考預(yù)測(cè)像素點(diǎn)的預(yù)測(cè)值；

選取預(yù)測(cè)值最大的一個(gè)所述參考預(yù)測(cè)像素點(diǎn)替換所述目標(biāo)預(yù)測(cè)圖像中的所述目標(biāo)預(yù)測(cè)像素點(diǎn)。

在一些實(shí)施例中，所述選取一個(gè)所述參考預(yù)測(cè)像素點(diǎn)修正所述目標(biāo)預(yù)測(cè)圖像中的所述目標(biāo)預(yù)測(cè)像素點(diǎn)，包括：

獲取所述深度學(xué)習(xí)摳圖模型輸出每一個(gè)所述參考預(yù)測(cè)像素點(diǎn)的預(yù)測(cè)值；