[發(fā)明專利]圖像中關(guān)聯(lián)對象的檢測方法、裝置、設(shè)備和存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202180001700.0
• 申請日: 2021-06-07
• 公開（公告）號: CN113557546A
• 公開（公告）日: 2021-10-26
• 發(fā)明（設(shè)計）人: 劉春亞;張學(xué)森;王柏潤;陳景煥
• 申請（專利權(quán)）人: 商湯國際私人有限公司
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06K9/00;G06K9/32;G06K9/46;G06N3/04;G06N3/08
• 代理公司: 北京博思佳知識產(chǎn)權(quán)代理有限公司 11415
• 代理人: 艾佳

本申請?zhí)岢鰣D像中關(guān)聯(lián)對象的檢測方法、裝置、設(shè)備和存儲介質(zhì)。其中，上述方法可以包括，檢測目標(biāo)圖像中的人臉對象，人手對象以及預(yù)設(shè)人體部位對象。其中，上述預(yù)設(shè)人體部位對象表征人臉與人手之間的預(yù)設(shè)連接部位。對檢測出的人臉對象與預(yù)設(shè)人體部位對象，以及預(yù)設(shè)人體部位對象與人手對象分別進(jìn)行關(guān)聯(lián)性預(yù)測，得到人臉對象與預(yù)設(shè)人體部位對象的第一關(guān)聯(lián)性預(yù)測結(jié)果，以及預(yù)設(shè)人體部位對象與人手對象的第二關(guān)聯(lián)性預(yù)測結(jié)果。根據(jù)上述第一關(guān)聯(lián)性預(yù)測結(jié)果以及上述第二關(guān)聯(lián)性預(yù)測結(jié)果，確定上述目標(biāo)圖像中的關(guān)聯(lián)對象。

相關(guān)公開的交叉引用

本申請要求2021年3月17日遞交的、申請?zhí)枮?0202102716Y的新加坡專利申請的優(yōu)先權(quán)，其全部內(nèi)容通過引用并入本文。

技術(shù)領(lǐng)域

本申請涉及計算機(jī)技術(shù)，具體涉及圖像中關(guān)聯(lián)對象的檢測方法、裝置、設(shè)備和存儲介質(zhì)。

背景技術(shù)

智能視頻分析技術(shù)可以幫助人類了解物理空間中的對象的狀態(tài)以及對象之間的關(guān)系。在智能視頻分析的一個應(yīng)用場景中，需要根據(jù)視頻中出現(xiàn)的人體部位識別出該部位對應(yīng)的人員身份。

人體部位與人員身份的關(guān)系可以通過一些中介信息來辨別。其中，中介信息可以是與人體部位和人員的身份均存在比較明確的關(guān)聯(lián)關(guān)系的對象的信息。例如，人臉信息可以作為用于標(biāo)識人員的身份的生物信息。當(dāng)需要確認(rèn)圖像中檢測到的手部所屬人員的身份時，可以通過與手部互為關(guān)聯(lián)對象的人臉來確定。其中，關(guān)聯(lián)對象，可以是指兩個對象與同一個第三對象具有歸屬關(guān)系，或者具有相同的身份信息屬性。兩個人體部位互為關(guān)聯(lián)對象，可以認(rèn)為兩個人體部位屬于同一人員。

通過將圖像中的人體部位關(guān)聯(lián)，可以進(jìn)一步幫助分析多人場景中個體的行為和狀態(tài)，以及多人之間的關(guān)系。

發(fā)明內(nèi)容

有鑒于此，本申請至少公開一種圖像中關(guān)聯(lián)對象的檢測方法，上述方法包括：檢測目標(biāo)圖像中的人臉對象，人手對象以及預(yù)設(shè)人體部位對象，其中，上述預(yù)設(shè)人體部位對象表征人臉與人手之間的預(yù)設(shè)連接部位；對檢測出的人臉對象與預(yù)設(shè)人體部位對象，以及預(yù)設(shè)人體部位對象與人手對象分別進(jìn)行關(guān)聯(lián)性預(yù)測，得到人臉對象與預(yù)設(shè)人體部位對象的第一關(guān)聯(lián)性預(yù)測結(jié)果，以及預(yù)設(shè)人體部位對象與人手對象的第二關(guān)聯(lián)性預(yù)測結(jié)果；根據(jù)上述第一關(guān)聯(lián)性預(yù)測結(jié)果以及上述第二關(guān)聯(lián)性預(yù)測結(jié)果，確定上述目標(biāo)圖像中的關(guān)聯(lián)對象。

本申請還提出一種圖像中關(guān)聯(lián)對象的檢測裝置，上述裝置包括：檢測模塊，用于檢測目標(biāo)圖像中的人臉對象，人手對象以及預(yù)設(shè)人體部位對象，其中，上述預(yù)設(shè)人體部位對象表征人臉與人手之間的預(yù)設(shè)連接部位；第一關(guān)聯(lián)性預(yù)測模塊，用于對檢測出的人臉對象與預(yù)設(shè)人體部位對象，以及預(yù)設(shè)人體部位對象與人手對象分別進(jìn)行關(guān)聯(lián)性預(yù)測，得到人臉對象與預(yù)設(shè)人體部位對象的第一關(guān)聯(lián)性預(yù)測結(jié)果，以及預(yù)設(shè)人體部位對象與人手對象的第二關(guān)聯(lián)性預(yù)測結(jié)果；確定模塊，用于根據(jù)上述第一關(guān)聯(lián)性預(yù)測結(jié)果以及上述第二關(guān)聯(lián)性預(yù)測結(jié)果，確定上述目標(biāo)圖像中的關(guān)聯(lián)對象。

本申請還提出一種電子設(shè)備，包括：處理器；用于存儲上述處理器可執(zhí)行指令的存儲器；其中，上述處理器被配置為調(diào)用上述存儲器中存儲的可執(zhí)行指令，實現(xiàn)如前述任一實施例示出的圖像中關(guān)聯(lián)對象的檢測方法。

一種計算機(jī)可讀存儲介質(zhì)，上述存儲介質(zhì)存儲有計算機(jī)程序，上述計算機(jī)程序用于執(zhí)行如前述任一實施例示出的圖像中關(guān)聯(lián)對象的檢測方法。

在上述方案中，通過將表征人臉與人手之間的預(yù)設(shè)連接部位的預(yù)設(shè)人體部位對象作為中介，分別預(yù)測人臉對象與該預(yù)設(shè)人體部位對象之間的關(guān)聯(lián)性，以及該預(yù)設(shè)人體部位對象與人手對象之間的關(guān)聯(lián)性，然后再根據(jù)人臉對象與該預(yù)設(shè)人體部位對象之間的預(yù)測結(jié)果以及該預(yù)設(shè)人體部位對象與人手對象之間的預(yù)測結(jié)果，確定檢測出的人臉對象與人手對象之間的關(guān)聯(lián)性，與直接預(yù)測人臉與人手關(guān)聯(lián)性相比，通過引入與人臉和人手均聯(lián)系緊密的上述預(yù)設(shè)人體部位對象作為中介，可以確定更準(zhǔn)確的人臉對象與人手對象之間的關(guān)聯(lián)性，并且在預(yù)測人臉與人手關(guān)聯(lián)性時可以引入較少的干擾信息，提升關(guān)聯(lián)性預(yù)測準(zhǔn)確性。