[發(fā)明專利]視頻的目標(biāo)分割方法、裝置、設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202011421192.5
• 申請(qǐng)日: 2020-12-07
• 公開（公告）號(hào): CN114596325A
• 公開（公告）日: 2022-06-07
• 發(fā)明（設(shè)計(jì)）人: 鄒夢(mèng)超;劉陽興;林染染;黨晚婷;張傳昊
• 申請(qǐng)（專利權(quán)）人: 武漢TCL集團(tuán)工業(yè)研究院有限公司
• 主分類號(hào): G06T7/12
• 分類號(hào): G06T7/12;G06T7/181;G06T7/246;G06N20/00
• 代理公司: 深圳中一聯(lián)合知識(shí)產(chǎn)權(quán)代理有限公司 44414
• 代理人: 李木燕

本申請(qǐng)公開了一種視頻的目標(biāo)分割方法、裝置、設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，屬于圖像處理領(lǐng)域。該方法包括：從視頻幀序列中獲取第一視頻幀；通過曲線擺置分割網(wǎng)絡(luò)模型對(duì)第一視頻幀進(jìn)行處理，生成第一視頻幀中目標(biāo)邊緣的閉合曲線，將生成的閉合曲線作為第一目標(biāo)邊緣；對(duì)第一目標(biāo)邊緣的位置進(jìn)行調(diào)整，確定第一視頻幀之后的視頻幀中的目標(biāo)邊緣，以對(duì)之后視頻幀進(jìn)行目標(biāo)跟蹤。本申請(qǐng)能夠通過曲線擺置分割網(wǎng)絡(luò)模型從視頻幀中準(zhǔn)確地提取出目標(biāo)邊緣，提高了分割目標(biāo)的完整性和清晰度。另外，通過對(duì)已提取的目標(biāo)邊緣的位置進(jìn)行調(diào)整，來確定之后視頻幀的目標(biāo)邊緣，提高了分割目標(biāo)的邊緣穩(wěn)定性，跟蹤效果更加穩(wěn)定。

技術(shù)領(lǐng)域

本申請(qǐng)涉及圖像處理領(lǐng)域，特別涉及一種視頻的目標(biāo)分割方法、裝置、設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。

背景技術(shù)

視頻的目標(biāo)分割是指將視頻幀分割成若干個(gè)特定的、具有獨(dú)特性質(zhì)的區(qū)域，并從中提取出感興趣目標(biāo)的技術(shù)和過程，它是目標(biāo)檢測(cè)中的重要步驟。

相關(guān)技術(shù)中，通常采用語義分割技術(shù)對(duì)視頻進(jìn)行目標(biāo)分割，且對(duì)于視頻幀序列中的每個(gè)視頻幀，均采用語義分割技術(shù)單獨(dú)進(jìn)行分割處理。在采用語義分割技術(shù)對(duì)每個(gè)視頻幀單獨(dú)進(jìn)行分割處理的過程中，先對(duì)視頻幀中的每個(gè)像素進(jìn)行分類，得到每個(gè)像素的類別，再根據(jù)每個(gè)像素的類別，從視頻幀的所有像素中確定出屬于目標(biāo)的像素集合，將確定的像素集合作為待分割的目標(biāo)。

但是語義分割技術(shù)只能確定出一個(gè)像素集合，像素集合中像素之間可能沒有關(guān)聯(lián)，導(dǎo)致像素集合的邊界沒有整體性，無法分割出完整清晰的目標(biāo)。而且，采用語義分割技術(shù)對(duì)各個(gè)視頻幀單獨(dú)進(jìn)行分割處理，可能會(huì)導(dǎo)致從各個(gè)視頻幀中分割出的同一目標(biāo)的變化較大，幀間信息的融合也比較困難，穩(wěn)定性較低。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例提供了一種視頻的目標(biāo)分割方法、裝置、設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，可以用于解決相關(guān)技術(shù)中存在的無法分割出完整清晰的目標(biāo)，以及視頻分割穩(wěn)定性較低的問題。技術(shù)方案如下：

一方面，提供了一種視頻的目標(biāo)分割方法，包括：

從視頻幀序列中獲取第一視頻幀，該第一視頻幀為該視頻幀序列中除最后一個(gè)視頻幀之外的任一視頻幀；

通過曲線擺置分割網(wǎng)絡(luò)模型對(duì)該第一視頻幀進(jìn)行處理，生成第一視頻幀中目標(biāo)邊緣的閉合曲線，將生成的閉合曲線作為第一目標(biāo)邊緣；

對(duì)該第一目標(biāo)邊緣的位置進(jìn)行調(diào)整，確定位于該第一視頻幀之后的視頻幀中的目標(biāo)邊緣，以對(duì)位于該第一視頻幀之后的視頻幀進(jìn)行目標(biāo)跟蹤。

另一方面，提供了一種視頻的目標(biāo)分割裝置，包括：

第一獲取模塊，用于從視頻幀序列中獲取第一視頻幀，該第一視頻幀為該視頻幀序列中除最后一個(gè)視頻幀之外的任一視頻幀；

模型處理模塊，用于通過曲線擺置分割網(wǎng)絡(luò)模型對(duì)該第一視頻幀進(jìn)行處理，生成第一視頻幀中目標(biāo)邊緣的閉合曲線，將生成的閉合曲線作為第一目標(biāo)邊緣；

目標(biāo)跟蹤模塊，用于對(duì)該第一目標(biāo)邊緣的位置進(jìn)行調(diào)整，確定位于該第一視頻幀之后的視頻幀中的目標(biāo)邊緣，以對(duì)位于該第一視頻幀之后的視頻幀進(jìn)行目標(biāo)跟蹤。

又一方面，提供了一種計(jì)算機(jī)設(shè)備，該計(jì)算機(jī)設(shè)備包括存儲(chǔ)器、處理器以及存儲(chǔ)在該存儲(chǔ)器中并可在該處理器上運(yùn)行的計(jì)算機(jī)程序，該計(jì)算機(jī)程序被該處理器執(zhí)行時(shí)實(shí)現(xiàn)上述任一種視頻的目標(biāo)分割方法。

又一方面，提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，該計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)存儲(chǔ)有計(jì)算機(jī)程序，該計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)上述任一種視頻的目標(biāo)分割方法。

又一方面，還提供了一種計(jì)算機(jī)程序產(chǎn)品，當(dāng)該計(jì)算機(jī)程序產(chǎn)品被執(zhí)行時(shí)，用于實(shí)現(xiàn)上述任一種視頻的目標(biāo)分割方法。

本申請(qǐng)實(shí)施例提供的技術(shù)方案帶來的有益效果是：