[發明專利]基于視頻的對象處理方法、裝置、設備及可讀存儲介質

有效

• 申請號: 201910676167.2
• 申請日: 2019-07-25
• 公開（公告）號: CN110365903B
• 公開（公告）日: 2022-11-29
• 發明（設計）人: 田元
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: H04N5/232
• 分類號: H04N5/232;G06T3/40;G06T3/00
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 張所明

1.一種基于視頻的對象處理方法，其特征在于，所述方法包括：

獲取所述視頻的視頻流，所述視頻流的視頻內容中包括目標對象；

對所述視頻流的所述目標對象進行關鍵點追蹤，其中，所述目標對象對應有n個關鍵點，n為正整數，包括：獲取所述視頻流中的關鍵幀，對所述關鍵幀中的所述目標對象進行關鍵點識別，得到每幀關鍵幀中與所述目標對象對應的n個關鍵點，其中，不同關鍵點對應不同的關鍵點標識，不同關鍵幀內的關鍵點之間通過所述關鍵點標識存在對應關系；根據所述關鍵幀中識別得到的所述關鍵點，以及基于所述關鍵點在所述關鍵幀中的像素點變化情況，確定非關鍵幀中所述關鍵點所在的位置，實現對所述關鍵點的追蹤；

將所述n個關鍵點根據身體部分進行劃分，得到每個所述身體部分對應的第二關鍵點集合；

接收對目標身體部分的第二調整信號，所述第二調整信號用于指示對所述目標身體部分的輪廓進行獨立調整；

根據所述第二調整信號對與所述目標身體部分對應的所述第二關鍵點集合中的第五關鍵點進行位置調整；

根據所述第五關鍵點調整后的位置，對所述目標身體部分進行調整；

基于對所述第五關鍵點在所述關鍵幀和所述非關鍵幀中的追蹤，根據所述第五關鍵點調整后的位置，對所述視頻流中的關鍵幀和非關鍵幀中所述目標對象上的所述目標身體部分進行輪廓區域的調整。

2.根據權利要求1所述的方法，其特征在于，所述方法還包括：

接收作用于m個關鍵點中的第一關鍵點上的拖動操作，所述拖動操作的起始位置位于所述第一關鍵點周圍第一預設范圍內，所述m個關鍵點順次以曲線連接的方式對所述目標對象的輪廓進行構建，0＜m≤n；

根據所述拖動操作生成關鍵點調整信號，所述關鍵點調整信號中包括所述拖動操作對應的所述第一關鍵點，以及所述拖動操作的結束位置，所述關鍵點調整信號用于指示對所述目標對象的輪廓進行調整。

3.根據權利要求2所述的方法，其特征在于，所述方法還包括：

根據所述關鍵點調整信號將所述第一關鍵點調整至所述結束位置；

對所述m個關鍵點中位于所述第一關鍵點周圍第二預設范圍內的關鍵點進行與所述第一關鍵點對應的調整。

4.根據權利要求3所述的方法，其特征在于，所述對所述m個關鍵點中位于所述第一關鍵點周圍第二預設范圍內的關鍵點進行與所述第一關鍵點對應的調整，包括：

將所述拖動操作中所述起始位置移動至所述結束位置的方向確定為拖動方向，所述起始位置至所述結束位置之間的距離確定為拖動距離；

對位于所述第一關鍵點周圍第二預設范圍內的第二關鍵點，確定所述第二關鍵點與所述第一關鍵點之間的位置關系；

對所述拖動距離以與所述位置關系對應的放縮比例進行放縮，得到放縮距離；

以所述拖動方向以及所述放縮距離對所述第二關鍵點的位置進行調整。

5.根據權利要求1所述的方法，其特征在于，所述方法還包括：

接收關鍵點調整信號，所述關鍵點調整信號用于指示對所述目標對象的輪廓進行調整；

根據所述關鍵點調整信號將m個關鍵點輸入預設調整模型，所述m個關鍵點順次以曲線連接的方式對所述目標對象的輪廓進行構建，0＜m≤n；

通過所述預設調整模型輸出得到調整后的所述m個關鍵點，其中，所述預設調整模型是通過樣本對象對應的關鍵點訓練得到的。

6.根據權利要求1至5任一所述的方法，其特征在于，所述n個關鍵點中還包括與所述目標對象臉部對應的k個關鍵點，關鍵點調整信號還用于指示對所述目標對象的臉部進行調整，0＜k＜n；

所述方法還包括：

對所述k個關鍵點中的第三關鍵點的位置進行調整；

根據所述第三關鍵點調整后的位置，對所述第三關鍵點對應的臉部特征進行調整。