[發明專利]一種基于低秩先驗信息的混合分辨率多視點視頻超分辨方法

有效

• 申請號: 202010570081.4
• 申請日: 2020-06-21
• 公開（公告）號: CN111882486B
• 公開（公告）日: 2023-03-10
• 發明（設計）人: 盧少平;李森茂
• 申請（專利權）人: 南開大學
• 主分類號: G06T3/40
• 分類號: G06T3/40
• 代理公司: 天津耀達律師事務所 12223
• 代理人: 張耀

1.一種基于低秩先驗信息的混合分辨率多視點視頻超分辨方法，其特征在于充分利用多視點視頻間的相似性，利用高分辨紋理來重構低分辨紋理，同時利用低秩先驗信息來抑制塊噪聲，所述方法包括如下步驟：

a. 輸入低分辨率視頻與鄰近高分辨率視頻：對于需要重構的一路低分辨率視頻，重構第t幀時，為了充分利用時間上的相關性，該方法利用已經重構好的t-1幀，同時利用多路鄰近高分辨率視點的第t幀和第t-1幀；

b.相關性學習：利用局部線性嵌入的思想，將低分辨率視頻幀或塊所在流形空間中的相關性遷移到高分辨率視頻幀或塊所在的流形空間中，從而利用第t-1和t高分辨率視頻幀和學到的相關性來重構第t幀低分辨率視頻幀；

c．抑制塊噪聲：利用視頻幀或視頻幀中的圖像塊之間的低秩先驗，來抑制基于塊處理而產生的塊噪聲；

d.對于要重構的低分辨率視頻的第1幀，只使用相鄰高分辨率圖像的第1幀和第2幀來重構。

2.根據權利要求1所述的基于低秩先驗信息的混合分辨率多視點視頻超分辨方法，其特征在于：步驟b中所述將低分辨率視頻幀或塊所在流形空間中的相關性遷移到高分辨率視頻幀或塊所在的流形空間中，該方法首先獲取重構低分辨率視頻幀與相關高分辨率視頻幀對應低分辨率視頻幀的相關性矩陣，然后將這一相關性用于低分辨率視頻幀的重構。

3.根據權利要求1所述的基于低秩先驗信息的混合分辨率多視點視頻超分辨方法，其特征在于：步驟c中所述抑制塊噪聲的方法是，利用視頻幀或塊的低秩先驗，有效地抑制重構過程中所產生的塊噪聲。

4.根據權利要求1所述的基于低秩先驗信息的混合分辨率多視點視頻超分辨方法，其特征在于：步驟a中，重構低分辨率視頻要同時考慮時間和空間的相關性。

5.根據權利要求4所述的基于低秩先驗信息的混合分辨率多視點視頻超分辨方法，其特征在于：重構低分辨率視頻的每一幀需要鄰近視點的5幀。