[發(fā)明專利]深度檢測(cè)方法、裝置、電子設(shè)備和計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202011344694.2
• 申請(qǐng)日: 2020-11-24
• 公開(kāi)（公告）號(hào): CN112419388A
• 公開(kāi)（公告）日: 2021-02-26
• 發(fā)明（設(shè)計(jì)）人: 李雷;李健華;王權(quán);錢(qián)晨
• 申請(qǐng)（專利權(quán)）人: 深圳市商湯科技有限公司
• 主分類號(hào): G06T7/55
• 分類號(hào): G06T7/55;G06K9/00;G06K9/34
• 代理公司: 北京派特恩知識(shí)產(chǎn)權(quán)代理有限公司 11270
• 代理人: 崔曉嵐;張穎玲

本公開(kāi)提供了一種深度檢測(cè)方法、裝置、電子設(shè)備和計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，該方法包括：獲取圖像采集設(shè)備采集的至少一幀圖像，所述至少一幀圖像包括當(dāng)前幀圖像；對(duì)所述當(dāng)前幀圖像進(jìn)行單個(gè)人體的圖像分割，得到目標(biāo)人體的人體掩膜圖像；對(duì)所述至少一幀圖像進(jìn)行人體關(guān)鍵點(diǎn)的檢測(cè)，得出所述當(dāng)前幀圖像中至少一個(gè)人體的二維關(guān)鍵點(diǎn)信息和三維關(guān)鍵點(diǎn)信息；根據(jù)所述當(dāng)前幀圖像中至少一個(gè)人體的二維關(guān)鍵點(diǎn)信息和三維關(guān)鍵點(diǎn)信息、以及所述目標(biāo)人體的人體掩膜圖像，確定所述當(dāng)前幀圖像中所述目標(biāo)人體的深度檢測(cè)結(jié)果。

技術(shù)領(lǐng)域

本公開(kāi)涉及計(jì)算機(jī)視覺(jué)處理技術(shù)，尤其涉及一種深度檢測(cè)方法、裝置、電子設(shè)備和計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。

背景技術(shù)

在相關(guān)技術(shù)中，圖像的單人深度檢測(cè)技術(shù)在增強(qiáng)現(xiàn)實(shí)(Augmented Reality，AR)交互、虛擬拍照等應(yīng)用中有著重要應(yīng)用；在缺少三維深度相機(jī)等特殊硬件設(shè)備的場(chǎng)景中，如何實(shí)現(xiàn)圖像的單人深度檢測(cè)，是亟待解決的技術(shù)問(wèn)題。

發(fā)明內(nèi)容

本公開(kāi)實(shí)施例提供一種深度檢測(cè)方法、裝置、電子設(shè)備和計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。

本公開(kāi)實(shí)施例的技術(shù)方案是這樣實(shí)現(xiàn)的：

本公開(kāi)實(shí)施例提供了一種深度檢測(cè)方法，所述方法包括：

獲取圖像采集設(shè)備采集的至少一幀圖像，所述至少一幀圖像包括當(dāng)前幀圖像；

對(duì)所述當(dāng)前幀圖像進(jìn)行單個(gè)人體的圖像分割，得到目標(biāo)人體的人體掩膜圖像；

對(duì)所述至少一幀圖像進(jìn)行人體關(guān)鍵點(diǎn)的檢測(cè)，得出所述當(dāng)前幀圖像中至少一個(gè)人體的二維關(guān)鍵點(diǎn)信息和三維關(guān)鍵點(diǎn)信息；

根據(jù)所述當(dāng)前幀圖像中至少一個(gè)人體的二維關(guān)鍵點(diǎn)信息和三維關(guān)鍵點(diǎn)信息、以及所述目標(biāo)人體的人體掩膜圖像，確定所述當(dāng)前幀圖像中所述目標(biāo)人體的深度檢測(cè)結(jié)果。

本公開(kāi)的一些實(shí)施例中，所述根據(jù)所述當(dāng)前幀圖像中至少一個(gè)人體的二維關(guān)鍵點(diǎn)信息和三維關(guān)鍵點(diǎn)信息、以及所述目標(biāo)人體的人體掩膜圖像，確定所述當(dāng)前幀圖像中所述目標(biāo)人體的深度檢測(cè)結(jié)果，包括：

對(duì)所述當(dāng)前幀圖像中至少一個(gè)人體的二維關(guān)鍵點(diǎn)信息和三維關(guān)鍵點(diǎn)信息進(jìn)行優(yōu)化，得到優(yōu)化處理后的所述當(dāng)前幀圖像中至少一個(gè)人體的二維關(guān)鍵點(diǎn)信息和三維關(guān)鍵點(diǎn)信息；

基于所述優(yōu)化處理后的所述當(dāng)前幀圖像中至少一個(gè)人體的二維關(guān)鍵點(diǎn)信息和三維關(guān)鍵點(diǎn)信息、以及所述目標(biāo)人體的人體掩膜圖像，確定所述當(dāng)前幀圖像中所述目標(biāo)人體的深度檢測(cè)結(jié)果。

本公開(kāi)的一些實(shí)施例中，所述二維關(guān)鍵點(diǎn)信息包括二維關(guān)鍵點(diǎn)的坐標(biāo)信息，所述對(duì)所述當(dāng)前幀圖像中至少一個(gè)人體的二維關(guān)鍵點(diǎn)信息和三維關(guān)鍵點(diǎn)信息進(jìn)行優(yōu)化，得到優(yōu)化處理后的所述當(dāng)前幀圖像中至少一個(gè)人體的二維關(guān)鍵點(diǎn)信息，包括：

響應(yīng)于從所述當(dāng)前幀圖像未檢測(cè)到目標(biāo)人體的二維關(guān)鍵點(diǎn)，或者，從所述當(dāng)前幀圖像中目標(biāo)人體的二維關(guān)鍵點(diǎn)對(duì)應(yīng)的三維關(guān)鍵點(diǎn)未處于預(yù)設(shè)區(qū)域的情況，根據(jù)所述至少一幀圖像的有效的歷史幀圖像中目標(biāo)人體的二維關(guān)鍵點(diǎn)的坐標(biāo)信息，得出優(yōu)化處理后的所述當(dāng)前幀圖像中目標(biāo)人體的二維關(guān)鍵點(diǎn)的坐標(biāo)信息。

本公開(kāi)的一些實(shí)施例中，所述二維關(guān)鍵點(diǎn)信息包括二維關(guān)鍵點(diǎn)的坐標(biāo)信息，所述對(duì)所述當(dāng)前幀圖像中至少一個(gè)人體的二維關(guān)鍵點(diǎn)信息和三維關(guān)鍵點(diǎn)信息進(jìn)行優(yōu)化，得到優(yōu)化處理后的所述當(dāng)前幀圖像中至少一個(gè)人體的二維關(guān)鍵點(diǎn)信息，包括：

響應(yīng)于所述當(dāng)前幀圖像中目標(biāo)人體的二維關(guān)鍵點(diǎn)對(duì)應(yīng)的三維關(guān)鍵點(diǎn)處于預(yù)設(shè)區(qū)域的情況，根據(jù)所述當(dāng)前幀圖像和所述至少一幀圖像的有效的歷史幀圖像中目標(biāo)人體的二維關(guān)鍵點(diǎn)的坐標(biāo)信息，得到優(yōu)化處理后的所述當(dāng)前幀圖像中目標(biāo)人體的二維關(guān)鍵點(diǎn)的坐標(biāo)信息。

本公開(kāi)的一些實(shí)施例中，所述根據(jù)所述當(dāng)前幀圖像和所述至少一幀圖像的有效的歷史幀圖像中目標(biāo)人體的二維關(guān)鍵點(diǎn)的坐標(biāo)信息，得到優(yōu)化處理后的所述當(dāng)前幀圖像中目標(biāo)人體的二維關(guān)鍵點(diǎn)的坐標(biāo)信息，包括：