[發(fā)明專利]一種動物面部關(guān)鍵點標注方法

有效

• 申請?zhí)枺?/td>: 201810023304.8
• 申請日: 2018-01-10
• 公開（公告）號: CN108073914B
• 公開（公告）日: 2022-02-18
• 發(fā)明（設(shè)計）人: 陳丹;徐瀅
• 申請（專利權(quán)）人: 成都品果科技有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06T7/00;G06T7/73
• 代理公司: 成都高遠知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 51222
• 代理人: 李安霞;曾克

1.一種動物面部關(guān)鍵點標注方法，其特征在于，包括：

對輸入的樣本圖像中的動物面部進行檢測，獲取動物面框及動物面部關(guān)鍵點位置；

根據(jù)所述動物面框及動物面部關(guān)鍵點位置對所述輸入的樣本圖像進行處理，將處理后的樣本圖像送入預(yù)先訓(xùn)練的關(guān)鍵點預(yù)測網(wǎng)絡(luò)，獲取第一關(guān)鍵點預(yù)測結(jié)果；

對所述第一關(guān)鍵點預(yù)測結(jié)果進行調(diào)整，獲取動物面部關(guān)鍵點的標注點；

根據(jù)預(yù)先定義的標準圖像對所述標注點進行質(zhì)量檢測，獲取所述標注點的質(zhì)量評分；獲取所述標注點的質(zhì)量評分的方法包括：

獲取所述預(yù)先定義的標準圖像的關(guān)鍵點坐標；

計算所述標注點的坐標與所述標準圖像的關(guān)鍵點坐標的相似變換矩陣；

根據(jù)所述相似變換矩陣對所述輸入的樣本圖像做仿射變換，得到歸一化圖像；

提取所述歸一化圖像的圖像特征；

將所述圖像特征送入預(yù)先訓(xùn)練的分類器，獲取所述標注點的質(zhì)量評分。

2.根據(jù)權(quán)利要求1所述的動物面部關(guān)鍵點標注方法，其特征在于，所述圖像特征包括：HOG特征和/或深度特征；所述分類器的選取方式包括：決策樹，或邏輯回歸，或深度網(wǎng)絡(luò)。

3.根據(jù)權(quán)利要求1所述的動物面部關(guān)鍵點標注方法，其特征在于，在所述對輸入的樣本圖像中的動物面部進行檢測之前，還包括：對欲標注的樣本圖像的重要性進行評估。

4.根據(jù)權(quán)利要求3所述的動物面部關(guān)鍵點標注方法，其特征在于，所述對欲標注的樣本圖像的重要性進行評估的方法包括：

獲取所述欲標注的樣本圖像的關(guān)鍵點預(yù)測結(jié)果，為第二關(guān)鍵點預(yù)測結(jié)果；

將所述欲標注的樣本圖像進行左右翻轉(zhuǎn)，得到翻轉(zhuǎn)樣本圖像；獲取所述翻轉(zhuǎn)樣本圖像的關(guān)鍵點預(yù)測結(jié)果，為第三關(guān)鍵點預(yù)測結(jié)果；

將所述第三關(guān)鍵點預(yù)測結(jié)果的坐標進行左右翻轉(zhuǎn)，得到第四關(guān)鍵點預(yù)測結(jié)果；

計算所述第四關(guān)鍵點預(yù)測結(jié)果與所述第二關(guān)鍵點預(yù)測結(jié)果之間的誤差；

將所述誤差與預(yù)設(shè)的第二閾值進行比較，獲取所述欲標注的樣本圖像的重要性。

5.根據(jù)權(quán)利要求4所述的動物面部關(guān)鍵點標注方法，其特征在于，所述計算所述第四關(guān)鍵點預(yù)測結(jié)果與所述第二關(guān)鍵點預(yù)測結(jié)果之間的誤差的方法為：

其中，error為所述誤差，S₁為所述第二關(guān)鍵點預(yù)測結(jié)果，S₃為所述第四關(guān)鍵點預(yù)測結(jié)果，(x₁₀,y₁₀)，(x₁₁,y₁₁)為所述第二關(guān)鍵點預(yù)測結(jié)果中其中兩個關(guān)鍵點的坐標。

6.根據(jù)權(quán)利要求1所述的動物面部關(guān)鍵點標注方法，其特征在于，還包括：補充特定類別的樣本圖像。

7.根據(jù)權(quán)利要求6所述的動物面部關(guān)鍵點標注方法，其特征在于，所述補充特定類別的樣本圖像的方法包括：

統(tǒng)計已標注的樣本圖像的屬性分布，根據(jù)所述屬性分布獲知所缺樣本圖像；

根據(jù)預(yù)設(shè)的關(guān)鍵字，從網(wǎng)絡(luò)中下載所述所缺樣本圖像，并對下載的所缺樣本圖像進行去重處理。

8.根據(jù)權(quán)利要求7所述的動物面部關(guān)鍵點標注方法，其特征在于，所述已標注的樣本圖像的屬性包括：閉眼，睜眼，閉嘴，張嘴，正臉，側(cè)臉。

9.根據(jù)權(quán)利要求7所述的動物面部關(guān)鍵點標注方法，其特征在于，所述對下載的所缺樣本圖像進行去重處理的方法為：基于像素相似度去重，或基于語義哈希去重。