[發明專利]基于跟蹤拍攝的風格遷移方法及裝置

在審

• 申請號: 202010715144.0
• 申請日: 2020-07-22
• 公開（公告）號: CN111787227A
• 公開（公告）日: 2020-10-16
• 發明（設計）人: 不公告發明人
• 申請（專利權）人: 蘇州臻迪智能科技有限公司
• 主分類號: H04N5/232
• 分類號: H04N5/232
• 代理公司: 北京超成律師事務所 11646
• 代理人: 許書音

1.一種基于跟蹤拍攝的風格遷移方法，其特征在于，包括：

確定目標跟蹤對象；

根據所述目標跟蹤對象調整攝像部件的拍攝參數，對所述目標跟蹤對象進行跟蹤拍攝，得到跟蹤拍攝畫面；

對所述跟蹤拍攝畫面進行實時風格遷移，得到實時風格遷移畫面；

發送所述實時風格遷移畫面至用戶終端，以使所述用戶終端顯示所述實時風格遷移畫面。

2.根據權利要求1所述的基于跟蹤拍攝的風格遷移方法，其特征在于，在所述確定目標跟蹤對象之前，所述方法還包括：

獲取初始拍攝畫面；

發送所述初始拍攝畫面至用戶終端，以使所述用戶終端顯示所述初始拍攝畫面；

接收所述用戶終端發送的用戶輸入信息；

所述確定目標跟蹤對象，包括：

根據所述用戶輸入信息，確定目標跟蹤對象。

3.根據權利要求2所述的基于跟蹤拍攝的風格遷移方法，其特征在于，在所述獲取初始拍攝畫面之后，所述根據所述用戶輸入信息，確定目標跟蹤對象之前，所述方法還包括：

根據預設的卷積神經網絡模型對所述初始拍攝畫面進行分析，得到所述初始拍攝畫面中各拍攝對象的位置信息、尺度信息及畫面占比信息；

所述根據所述用戶輸入信息，確定目標跟蹤對象，包括：

根據所述用戶輸入信息和所述初始拍攝畫面中各拍攝對象的位置信息、尺度信息及畫面占比信息，確定目標跟蹤對象。

4.根據權利要求1所述的基于跟蹤拍攝的風格遷移方法，其特征在于，所述目標跟蹤對象處于所述跟蹤拍攝畫面的中心位置；

所述根據所述目標跟蹤對象調整攝像部件的拍攝參數，對所述目標跟蹤對象進行跟蹤拍攝，得到跟蹤拍攝畫面，包括：

獲取當前拍攝圖像；

根據所述當前拍攝圖像，獲得所述目標跟蹤對象的中心位置變化信息及尺度變化信息；

根據所述目標跟蹤對象的中心位置變化信息及尺度變化信息調整攝像部件的拍攝參數，對所述目標跟蹤對象進行跟蹤拍攝，得到跟蹤拍攝畫面。

5.根據權利要求4所述的基于跟蹤拍攝的風格遷移方法，其特征在于，所述根據所述當前拍攝圖像，獲得所述目標跟蹤對象的中心位置變化信息及尺度變化信息，包括：

根據所述當前拍攝圖像及預設的孿生全卷積網絡模型，獲得孿生模板圖像及搜索區域特征圖；

根據所述預設的孿生全卷積網絡模型對所述搜索區域特征圖進行卷積處理，得到對應的響應圖；

根據所述響應圖中峰值的位置信息估計得到所述目標跟蹤對象的中心位置變化信息；

根據所述當前拍攝圖像、預設的目標檢測網絡模型及所述當前拍攝圖像的目標語義分割信息，獲得所述目標跟蹤對象的尺度變化信息。

6.根據權利要求1所述的基于跟蹤拍攝的風格遷移方法，其特征在于，所述對所述跟蹤拍攝畫面進行實時風格遷移，得到實時風格遷移畫面，包括：

調低所述跟蹤拍攝畫面的跟蹤拍攝圖像的圖像分辨率；

對處理后的跟蹤拍攝圖像及風格模板圖像進行局部特征和全局特征的提取，構建得到對應的仿射雙邊網格；

根據預設的高分辨率網絡模型對處理后的跟蹤拍攝圖像進行切分；

利用所述仿射雙邊網格作用于切分后的跟蹤拍攝圖像，并利用三線性插值調高切分后的跟蹤拍攝圖像的圖像分辨率，得到實時風格遷移畫面。

7.根據權利要求1所述的基于跟蹤拍攝的風格遷移方法，其特征在于，所述對所述跟蹤拍攝畫面進行實時風格遷移，得到實時風格遷移畫面，包括：

根據所述跟蹤拍攝畫面的當前場景，確定風格遷移推薦模板；

根據所述跟蹤拍攝畫面及所述風格遷移推薦模板，得到風格遷移推薦畫面；

發送所述風格遷移推薦模板及所述風格遷移推薦畫面至用戶終端，以使所述用戶終端顯示所述風格遷移推薦模板及所述風格遷移推薦畫面；

接收所述用戶終端發送的用戶確認信息；

根據所述用戶確認信息對所述跟蹤拍攝畫面進行實時風格遷移，得到實時風格遷移畫面。