[發(fā)明專(zhuān)利]部位識(shí)別方法、裝置、終端及存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 201810820840.0
• 申請(qǐng)日: 2018-07-24
• 公開(kāi)（公告）號(hào): CN109117753B
• 公開(kāi)（公告）日: 2021-04-20
• 發(fā)明（設(shè)計(jì)）人: 曾梓華
• 申請(qǐng)（專(zhuān)利權(quán)）人: 廣州虎牙信息科技有限公司
• 主分類(lèi)號(hào): G06K9/00
• 分類(lèi)號(hào): G06K9/00;G06K9/62;H04N21/442
• 代理公司: 北京品源專(zhuān)利代理有限公司 11332
• 代理人: 孟金喆

1.一種部位識(shí)別方法，其特征在于，包括：

獲取顯示有用戶(hù)的至少一個(gè)部位的姿態(tài)圖像；

將所述姿態(tài)圖像輸入至部位識(shí)別模型中；

獲取所述部位識(shí)別模型輸出的用戶(hù)的至少一個(gè)部位的位置信息；

其中，所述部位識(shí)別模型包括特征提取子模型和部位檢測(cè)子模型，所述特征提取子模型包括：多組依次連接的卷積模塊和降采樣模塊，用于輸入姿態(tài)圖像，輸出所述姿態(tài)圖像中的特征；

所述部位檢測(cè)子模型包括：多個(gè)依次連接的檢測(cè)模塊和卷積模塊，用于輸入所述姿態(tài)圖像中的特征，輸出對(duì)應(yīng)部位的位置信息；

所述檢測(cè)模塊包括：相連接的降采樣模塊、多組依次連接的卷積模塊和升采樣模塊；

所述部位識(shí)別模型還包括跳層；

所述跳層將特征提取子模型中至少一個(gè)降采樣模塊輸出的特征進(jìn)行拼接后，與部位檢測(cè)子模型中對(duì)應(yīng)升采樣模塊輸出的特征進(jìn)行拼接。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述卷積模塊包括M個(gè)bottleneck，每個(gè)bottleneck包括相連接的擴(kuò)張層、卷積層和壓縮層，輸出通道數(shù)為N，其中M、N是自然數(shù)，3≤M≤5，16≤N≤96。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，每個(gè)bottleneck包括深度卷積和逐點(diǎn)卷積。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取所述部位識(shí)別模型輸出的用戶(hù)的至少一個(gè)部位的位置信息，包括：

獲取所述部位識(shí)別模型輸出的用戶(hù)對(duì)應(yīng)部位的熱力圖。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，在獲取所述部位識(shí)別模型輸出的用戶(hù)對(duì)應(yīng)部位的熱力圖之后，還包括：

從對(duì)應(yīng)各部位的熱力圖中，分別確定各部位的位置坐標(biāo)。

6.根據(jù)權(quán)利要求1-5任一項(xiàng)所述的方法，其特征在于，在所述獲取所述部位識(shí)別模型輸出的用戶(hù)的至少一個(gè)部位的位置信息之后，還包括：

根據(jù)所述至少一個(gè)部位的位置信息，計(jì)算所述用戶(hù)的姿態(tài)信息；

根據(jù)所述用戶(hù)的姿態(tài)信息和基準(zhǔn)姿態(tài)信息，向用戶(hù)提示姿態(tài)矯正信息。

7.一種部位識(shí)別裝置，其特征在于，包括：

第一獲取模塊，用于獲取顯示有用戶(hù)的至少一個(gè)部位的姿態(tài)圖像；

輸入模塊，用于將所述姿態(tài)圖像輸入至部位識(shí)別模型中；

第二獲取模塊，用于獲取所述部位識(shí)別模型輸出的用戶(hù)的至少一個(gè)部位的位置信息；

其中，所述部位識(shí)別模型包括特征提取子模型和部位檢測(cè)子模型，所述特征提取子模型包括：多組依次連接的卷積模塊和降采樣模塊，用于輸入姿態(tài)圖像，輸出所述姿態(tài)圖像中的特征；

所述部位檢測(cè)子模型包括：多個(gè)依次連接的檢測(cè)模塊和卷積模塊，用于輸入所述姿態(tài)圖像中的特征，輸出對(duì)應(yīng)部位的位置信息；

所述檢測(cè)模塊包括：相連接的降采樣模塊、多組依次連接的卷積模塊和升采樣模塊；

所述部位識(shí)別模型還包括跳層；

所述跳層將特征提取子模型中至少一個(gè)降采樣模塊輸出的特征進(jìn)行拼接后，與部位檢測(cè)子模型中對(duì)應(yīng)升采樣模塊輸出的特征進(jìn)行拼接。

8.一種終端，其特征在于，包括：

一個(gè)或多個(gè)處理器；

存儲(chǔ)器，用于存儲(chǔ)一個(gè)或多個(gè)程序，

當(dāng)所述一個(gè)或多個(gè)程序被所述一個(gè)或多個(gè)處理器執(zhí)行，使得所述一個(gè)或多個(gè)處理器實(shí)現(xiàn)如權(quán)利要求1-6中任一所述的部位識(shí)別方法。

9.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，其特征在于，該程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1-6中任一所述的部位識(shí)別方法。