[發明專利]特效顯示方法、裝置、計算機設備及存儲介質

在審

• 申請號: 202110501904.2
• 申請日: 2021-05-08
• 公開（公告）號: CN113139919A
• 公開（公告）日: 2021-07-20
• 發明（設計）人: 陳盛福
• 申請（專利權）人: 廣州繁星互娛信息科技有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06T7/246;G06K9/00;G06K9/62
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 李芳

1.一種特效顯示方法，其特征在于，由終端執行，所述方法包括：

響應于對目標特效的顯示指令，在第一圖像幀的人臉位置上，顯示目標特效，所述人臉位置基于多個第一人臉關鍵點確定，所述多個第一人臉關鍵點基于對所述第一圖像幀的人臉檢測得到；

響應于第二圖像幀人臉檢測失敗，基于所述多個第一人臉關鍵點，對所述第二圖像幀進行人臉關鍵點跟蹤，得到多個第二人臉關鍵點，所述第二圖像幀為所述第一圖像幀之后的圖像幀；

響應于所述多個第二人臉關鍵點滿足目標條件，在基于所述多個第二人臉關鍵點所確定的人臉位置上，顯示所述目標特效。

2.根據權利要求1所述的方法，其特征在于，所述響應于所述多個第二人臉關鍵點滿足目標條件，在基于所述多個第二人臉關鍵點所確定的人臉位置上，顯示所述目標特效包括：

對于所述第二人臉關鍵點，獲取所述第一圖像幀的第一圖像特征和所述第二圖像幀的第二圖像特征，所述第一圖像特征為所述第二人臉關鍵點對應的第一人臉關鍵點關聯區域的圖像特征，所述第二圖像特征為所述第二人臉關鍵點關聯區域的圖像特征；

確定多個所述第二人臉關鍵點的所述第一圖像特征與所述第二圖像特征之間的圖像相似度；

響應于多個所述第二人臉關鍵點對應的圖像相似度均達到第一閾值，在基于所述多個第二人臉關鍵點所確定的人臉位置上，顯示所述目標特效。

3.根據權利要求2所述的方法，其特征在于，所述確定多個所述第二人臉關鍵點的所述第一圖像特征與所述第二圖像特征之間的圖像相似度之后，所述方法還包括：

基于多個所述第二人臉關鍵點對應的圖像相似度，確定目標比例，所述目標比例為圖像相似度達到第一閾值的第二人臉關鍵點的數量占第二人臉關鍵點總數的比例；

響應于所述目標比例達到比例閾值，執行所述在基于所述多個第二人臉關鍵點所確定的人臉位置上，顯示所述目標特效的步驟。

4.根據權利要求1所述的方法，其特征在于，所述響應于所述多個第二人臉關鍵點滿足目標條件，在基于所述多個第二人臉關鍵點所確定的人臉位置上，顯示所述目標特效包括：

確定第一人臉輪廓和第二人臉輪廓之間的人臉相似度，所述第一人臉輪廓為所述多個第一人臉關鍵點對應的人臉輪廓，所述第二人臉輪廓為所述多個第二人臉關鍵點對應的第二人臉輪廓；

響應于所述人臉相似度達到第二閾值，在基于所述多個第二人臉關鍵點所確定的人臉位置上，顯示所述目標特效。

5.根據權利要求4所述的方法，其特征在于，所述確定所述第一人臉輪廓和所述第二人臉輪廓之間的人臉相似度之前，所述方法還包括：

分別將所述多個第一人臉關鍵點和所述多個第二人臉關鍵點的位置信息輸入特征提取網絡，通過所述特征提取網絡對人臉特征進行提取，得到所述第一人臉輪廓的第一人臉特征和所述第二人臉輪廓的第二人臉特征；

基于所述第一人臉特征和所述第二人臉特征，執行所述確定所述第一人臉輪廓和所述第二人臉輪廓之間的人臉相似度的步驟。

6.根據權利要求1所述的方法，其特征在于，所述基于所述多個第一人臉關鍵點，對所述第二圖像幀進行人臉關鍵點跟蹤，得到多個第二人臉關鍵點包括：

將所述多個第一人臉關鍵點輸入人臉跟蹤網絡，通過所述人臉跟蹤網絡對所述第二圖像幀進行人臉關鍵點跟蹤，得到所述多個第二人臉關鍵點。

7.一種特效顯示裝置，其特征在于，所述裝置包括：

第一顯示模塊，用于響應于對目標特效的顯示指令，在第一圖像幀的人臉位置上，顯示目標特效，所述人臉位置基于多個第一人臉關鍵點確定，所述多個第一人臉關鍵點基于對所述第一圖像幀的人臉檢測得到；

跟蹤模塊，用于響應于第二圖像幀人臉檢測失敗，基于所述多個第一人臉關鍵點，對所述第二圖像幀進行人臉關鍵點跟蹤，得到多個第二人臉關鍵點，所述第二圖像幀為所述第一圖像幀之后的圖像幀；

第二顯示模塊，用于響應于所述多個第二人臉關鍵點滿足目標條件，在基于所述多個第二人臉關鍵點所確定的人臉位置上，顯示所述目標特效。