[發(fā)明專利]圖像中關(guān)聯(lián)對象的檢測方法、裝置、設(shè)備和存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202180001700.0
• 申請日: 2021-06-07
• 公開（公告）號: CN113557546A
• 公開（公告）日: 2021-10-26
• 發(fā)明（設(shè)計）人: 劉春亞;張學(xué)森;王柏潤;陳景煥
• 申請（專利權(quán)）人: 商湯國際私人有限公司
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06K9/00;G06K9/32;G06K9/46;G06N3/04;G06N3/08
• 代理公司: 北京博思佳知識產(chǎn)權(quán)代理有限公司 11415
• 代理人: 艾佳

1.一種圖像中關(guān)聯(lián)對象的檢測方法，其特征在于，所述方法包括：

檢測目標(biāo)圖像中的人臉對象，人手對象以及預(yù)設(shè)人體部位對象，其中，所述預(yù)設(shè)人體部位對象表征人臉與人手之間的預(yù)設(shè)連接部位；

對檢測出的人臉對象與預(yù)設(shè)人體部位對象，以及預(yù)設(shè)人體部位對象與人手對象分別進行關(guān)聯(lián)性預(yù)測，得到人臉對象與預(yù)設(shè)人體部位對象的第一關(guān)聯(lián)性預(yù)測結(jié)果，以及預(yù)設(shè)人體部位對象與人手對象的第二關(guān)聯(lián)性預(yù)測結(jié)果；

根據(jù)所述第一關(guān)聯(lián)性預(yù)測結(jié)果以及所述第二關(guān)聯(lián)性預(yù)測結(jié)果，確定所述目標(biāo)圖像中的關(guān)聯(lián)對象。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，

所述方法還包括：

對檢測出的人臉對象以及人手對象進行關(guān)聯(lián)性預(yù)測，得到第三關(guān)聯(lián)性預(yù)測結(jié)果；

所述根據(jù)所述第一關(guān)聯(lián)性預(yù)測結(jié)果以及所述第二關(guān)聯(lián)性預(yù)測結(jié)果，確定所述目標(biāo)圖像中的關(guān)聯(lián)對象，包括：

根據(jù)所述第一關(guān)聯(lián)性預(yù)測結(jié)果以及所述第二關(guān)聯(lián)性預(yù)測結(jié)果，對所述第三關(guān)聯(lián)性預(yù)測結(jié)果進行調(diào)整；

基于調(diào)整后的第三關(guān)聯(lián)性預(yù)測結(jié)果，確定所述目標(biāo)圖像中的關(guān)聯(lián)對象。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，

所述目標(biāo)圖像包括多個人臉對象和多個人手對象；

所述對檢測出的人臉對象以及人手對象進行關(guān)聯(lián)性預(yù)測，得到第三關(guān)聯(lián)性預(yù)測結(jié)果，包括：

將檢測出的各人臉對象，分別與檢測出的各人手對象進行組合，得到多個第一組合；

根據(jù)各第一組合內(nèi)的人臉對象和人手對象的視覺特征以及位置特征，對各第一組合內(nèi)的人臉對象與人手對象進行關(guān)聯(lián)性預(yù)測，得到各所述第一組合內(nèi)的人臉對象與人手對象之間的第三關(guān)聯(lián)性預(yù)測結(jié)果。

4.根據(jù)權(quán)利要求1-3任一所述的方法，其特征在于，

所述目標(biāo)圖像還包括多個預(yù)設(shè)人體部位對象；

所述對檢測出的人臉對象與預(yù)設(shè)人體部位對象，以及預(yù)設(shè)人體部位對象與人手對象分別進行關(guān)聯(lián)性預(yù)測，得到人臉對象與預(yù)設(shè)人體部位對象的第一關(guān)聯(lián)性預(yù)測結(jié)果，以及預(yù)設(shè)人體部位對象與人手對象的第二關(guān)聯(lián)性預(yù)測結(jié)果，包括：

將檢測出的各人臉對象，分別與各預(yù)設(shè)人體部位對象進行組合，得到多個第二組合；

根據(jù)各第二組合內(nèi)的人臉對象與預(yù)設(shè)人體部位對象的視覺特征以及位置特征，對各第二組合內(nèi)的人臉對象與預(yù)設(shè)人體部位對象進行關(guān)聯(lián)性預(yù)測，得到各第二組合內(nèi)的人臉對象與預(yù)設(shè)人體部位對象之間的第一關(guān)聯(lián)性預(yù)測結(jié)果；

將檢測出的各預(yù)設(shè)人體部位對象，分別與各人手對象進行組合，得到多個第三組合；

根據(jù)各第三組合內(nèi)的預(yù)設(shè)人體部位對象與人手對象的視覺特征以及位置特征，對各第三組合內(nèi)的預(yù)設(shè)人體部位對象與人手對象進行關(guān)聯(lián)性預(yù)測，得到各第三組合內(nèi)的預(yù)設(shè)人體部位對象與人手對象之間的第二關(guān)聯(lián)性預(yù)測結(jié)果。

5.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述根據(jù)所述第一關(guān)聯(lián)性預(yù)測結(jié)果以及所述第二關(guān)聯(lián)性預(yù)測結(jié)果，對所述第三關(guān)聯(lián)性預(yù)測結(jié)果進行調(diào)整，包括：

確定與所述預(yù)設(shè)人體部位對象之間的所述第一關(guān)聯(lián)性預(yù)測結(jié)果中的第一關(guān)聯(lián)性預(yù)測分?jǐn)?shù)最高的目標(biāo)人臉對象；

確定與所述預(yù)設(shè)人體部位對象之間的所述第二關(guān)聯(lián)性預(yù)測結(jié)果中的第二關(guān)聯(lián)性預(yù)測分?jǐn)?shù)最高的目標(biāo)人手對象；

基于所述目標(biāo)人臉對象與所述預(yù)設(shè)人體部位對象之間的第一關(guān)聯(lián)性預(yù)測分?jǐn)?shù)，以及所述預(yù)設(shè)人體部位對象與所述目標(biāo)人手對象之間的第二關(guān)聯(lián)性預(yù)測分?jǐn)?shù)，對所述目標(biāo)人臉對象與所述目標(biāo)人手對象之間的所述第三關(guān)聯(lián)性預(yù)測結(jié)果中的第三關(guān)聯(lián)性預(yù)測分?jǐn)?shù)進行調(diào)整。