[發明專利]視頻數據處理方法及裝置、電子設備和存儲介質有效
| 申請號： | 202011562381.4 | 申請日： | 2020-12-25 |
| 公開（公告）號： | CN112651880B | 公開（公告）日： | 2022-12-30 |
| 發明（設計）人： | 單鈺皓;張寧;王權 | 申請（專利權）人： | 北京市商湯科技開發有限公司 |
| 主分類號： | G06T3/00 | 分類號： | G06T3/00;G06N3/08 |
| 代理公司： | 北京林達劉知識產權代理事務所(普通合伙) 11277 | 代理人： | 劉新宇 |
| 地址： | 100080 北京市海淀區北*** | 國省代碼： | 北京;11 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 視頻 數據處理 方法 裝置 電子設備 存儲 介質 | ||
1.一種視頻數據處理方法，其特征在于，所述方法包括：
獲取待處理視頻數據；
通過圖像處理網絡對所述待處理視頻數據中的每一視頻幀進行圖像處理，得到圖像處理后的視頻數據；
所述方法還包括：
對第一樣本圖像進行變換處理，得到第二樣本圖像，其中，所述第二樣本圖像與所述第一樣本圖像中具有相同語義的像素點，在所述第二樣本圖像及所述第一樣本圖像中的位置不同；
通過圖像處理網絡對所述第一樣本圖像及第二樣本圖像進行圖像處理，得到圖像處理后的第一樣本圖像及圖像處理后的第二樣本圖像；
對所述圖像處理后的第二樣本圖像進行逆變換處理，得到逆變換圖像；
通過所述逆變換圖像及所述圖像處理后的第一樣本圖像之間的差異，以及所述圖像處理后的第一樣本圖像和所述圖像處理后的第二樣本圖像中具有相同語義的像素點的差異確定的穩定損失，訓練所述圖像處理網絡；
在所述變換處理為隨機仿射變換的情況下，所述對第一樣本圖像進行變換處理，得到第二樣本圖像，包括：
根據仿射變換矩陣對所述第一樣本圖像進行變換處理，得到所述第二樣本圖像；
所述對所述圖像處理后的第二樣本圖像進行逆變換處理，得到逆變換圖像，包括：
根據逆仿射變換矩陣對所述圖像處理后的第二樣本圖像進行逆變換處理，得到逆變換圖像，其中，所述仿射變換矩陣與所述逆仿射變換矩陣的乘積為1。
2.根據權利要求1所述的方法，其特征在于，所述圖像處理網絡為風格化網絡，所述風格化網絡用于對待處理視頻數據進行風格化處理，得到風格化視頻數據，所述風格化視頻數據的風格與所述風格化網絡對應的風格相同。
3.根據權利要求1所述的方法，其特征在于，所述通過所述逆變換圖像及所述圖像處理后的第一樣本圖像之間的差異，訓練所述圖像處理網絡，包括：
通過所述第一樣本圖像及所述逆變換圖像得到蒙版圖像；
根據所述圖像處理后的第一樣本圖像、所述逆變換圖像及所述蒙版圖像，確定所述圖像處理網絡的穩定損失，其中，所述穩定損失包括所述逆變換圖像及所述圖像處理后的第一樣本圖像之間的差異；
根據所述圖像處理網絡的穩定損失，調整所述圖像處理網絡的網絡參數。
4.根據權利要求3所述的方法，其特征在于，所述根據所述圖像處理后的第一樣本圖像、所述逆變換圖像及所述蒙版圖像，確定所述圖像處理網絡的穩定損失，包括：
根據所述圖像處理后的第一樣本圖像與所述蒙版圖像，得到第一融合圖像，及根據所述逆變換圖像與所述蒙版圖像，得到第二融合圖像；
根據所述第一融合圖像與所述第二融合圖像，確定所述圖像處理網絡的穩定損失。
5.根據權利要求1至4中任一項所述的方法，其特征在于，所述變換處理包括隨機仿射變換、非均勻采樣操作、深度信息透視變化操作中的任一項，所述隨機仿射變換包括平移、縮放、翻轉、旋轉、剪切中的至少一項操作。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于北京市商湯科技開發有限公司，未經北京市商湯科技開發有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/202011562381.4/1.html，轉載請聲明來源鉆瓜專利網。
- 上一篇：一種具有自動上料和處塵功能的清花機
- 下一篇：價值預測信息反饋方法及裝置
