[發明專利]圖像處理方法及裝置、電子設備和存儲介質

有效

• 申請號: 202010129837.1
• 申請日: 2020-02-28
• 公開（公告）號: CN111369438B
• 公開（公告）日: 2022-07-26
• 發明（設計）人: 陳焯杰;余可;王鑫濤;董超;呂健勤;湯曉鷗
• 申請（專利權）人: 北京市商湯科技開發有限公司
• 主分類號: G06T3/40
• 分類號: G06T3/40;G06N3/04;G06N3/08
• 代理公司: 北京林達劉知識產權代理事務所(普通合伙) 11277
• 代理人: 劉新宇

1.一種圖像處理方法，其特征在于，包括：

獲取視頻片段中第x+1個視頻幀的反向傳播特征及第x-1個視頻幀的正向傳播特征中的至少一項，其中，視頻片段包括N個視頻幀，N為大于2的整數，x為整數；

根據第x個視頻幀、所述第x+1個視頻幀的反向傳播特征和所述第x-1個視頻幀的正向傳播特征中的至少一項，得到所述第x個視頻幀的重構特征，所述第x個視頻幀的重構特征為所述第x個視頻幀的正向傳播特征，或所述第x個視頻幀的反向傳播特征；

根據所述第x個視頻幀的重構特征對第x個視頻幀進行重構，得到與第x個視頻幀對應的目標視頻幀，所述目標視頻幀的分辨率高于所述第x個視頻幀的分辨率。

2.根據權利要求1所述的方法，其特征在于，1xN，所述根據第x個視頻幀、所述第x+1個視頻幀的反向傳播特征和所述第x-1個視頻幀的正向傳播特征中的至少一項，得到所述第x個視頻幀的重構特征，包括：

根據所述第x個視頻幀、所述第x+1個視頻幀及所述第x+1個視頻幀的反向傳播特征，確定所述第x個視頻幀的反向傳播特征；

根據所述第x個視頻幀、所述第x-1個視頻幀、所述第x-1個視頻幀的正向傳播特征及所述第x個視頻幀的反向傳播特征，確定所述第x個視頻幀的正向傳播特征；

將所述第x個視頻幀的正向傳播特征作為所述第x個視頻幀的重構特征。

3.根據權利要求2所述的方法，其特征在于，所述根據所述第x個視頻幀、第x+1個視頻幀及所述第x+1個視頻幀的反向傳播特征，確定所述第x個視頻幀的反向傳播特征，包括：

根據所述第x個視頻幀及所述第x+1個視頻幀，得到第一光流圖；

根據所述第一光流圖對所述第x+1個視頻幀的反向傳播特征進行扭曲，得到扭曲后的反向傳播特征；

根據所述扭曲后的反向傳播特征及所述第x個視頻幀，得到所述第x個視頻幀的反向傳播特征。

4.根據權利要求2或3所述的方法，其特征在于，所述根據所述第x個視頻幀、所述第x-1個視頻幀、所述第x-1個視頻幀的正向傳播特征、及所述第x個視頻幀的反向傳播特征，確定所述第x個視頻幀的正向傳播特征，包括：

根據所述第x個視頻幀及所述第x-1個視頻幀，得到第二光流圖；

根據所述第二光流圖對所述第x-1個視頻幀的正向傳播特征進行扭曲，得到扭曲后的正向傳播特征；

根據所述第x個視頻幀的反向傳播特征、所述扭曲后的正向傳播特征、及所述第x個視頻幀，得到所述第x個視頻幀的正向傳播特征。

5.根據權利要求1所述的方法，其特征在于，1xN，所述根據第x個視頻幀、所述第x+1個視頻幀的反向傳播特征和所述第x-1個視頻幀的正向傳播特征中的至少一項，得到所述第x個視頻幀的重構特征，包括：

根據所述第x個視頻幀、所述第x-1個視頻幀及所述第x-1個視頻幀的正向傳播特征，確定所述第x個視頻幀的正向傳播特征；

根據所述第x個視頻幀、所述第x+1個視頻幀、所述第x+1個視頻幀的反向傳播特征及所述第x個視頻幀的正向傳播特征，確定所述第x個視頻幀的反向傳播特征；

將所述第x個視頻幀的反向傳播特征作為所述第x個視頻幀的重構特征。

6.根據權利要求5所述的方法，其特征在于，所述根據所述第x個視頻幀、所述第x-1個視頻幀、及所述第x-1個視頻幀的正向傳播特征，確定所述第x個視頻幀的正向傳播特征，包括：

根據所述第x個視頻幀及所述第x-1個視頻幀，得到第二光流圖；

根據所述第二光流圖對所述第x-1個視頻幀的正向傳播特征進行扭曲，得到扭曲后的正向傳播特征；

根據所述扭曲后的正向傳播特征及所述第x個視頻幀，得到所述第x個視頻幀的正向傳播特征。