[發明專利]一種全景圖片無參考質量評價方法、系統及設備

有效

• 申請號: 201910966446.2
• 申請日: 2019-10-12
• 公開（公告）號: CN110910344B
• 公開（公告）日: 2022-09-13
• 發明（設計）人: 楊小康;翟廣濤;孫偉;朱文瀚
• 申請（專利權）人: 上海交通大學
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06V10/77;G06V10/80;G06V10/82;G06V10/766
• 代理公司: 上海恒慧知識產權代理事務所(特殊普通合伙) 31317
• 代理人: 劉翠

本發明提供了一種全景圖片無參考質量評價方法，包括：將失真圖片D從等距柱狀投影圖映射到立方體投影圖；采用單通道混合卷積神經網絡通道提取單個立方體投影視圖的特征值，將立方體投影圖的六個視圖分別通過對應的單通道混合卷積神經網絡，然后通過串聯的方式將六個通道提取的特征值融合在一起；使用一個全連接層將多通道卷積網絡提取的特征回歸到圖像質量分數。本發明同時提供了一種全景圖片無參考質量評價系統。本發明利用了立方體投影的方式解決了全景圖片失真的問題，使用混合卷積神經網絡有效地提取了有利于質量評價的特征。

技術領域

本發明涉及圖像質量評價技術領域，具體地，涉及一種基于多通道混合卷積神經網絡的全景圖片無參考質量評價方法、系統及設備。

背景技術

隨著VR技術地快速發展，越來越多的人們可以通過各種各樣的VR設備比如Googleglass、Gear VR、HTV VIVE等來觀看全景視頻和圖片，同時全景視頻和圖片可以給人一種身臨其境的感受，這讓全景視頻和圖片在VR電影、演唱會和體育比賽直播等多個場合有著廣泛的應用。但是，由于全景視頻和圖片需要記錄360度全方位的畫面信息，因此，全景視頻和圖片的分辨率一般都很高，所占據的存儲空間和傳輸帶寬也很大。故在現實的應用場景中，全景視頻和圖片都需要經過壓縮來節約占用的內存和帶寬。但過度的壓縮會對視頻和圖片的質量造成很大的損失。所以，在實際的應用場合中，對全景壓縮圖片的質量評價可以用有效的避免給用戶呈現質量低下的內容，提升用戶的體驗。故對全景壓縮圖片的質量評價算法研究非常重要。

圖像的質量評價可分為三種類型。第一種是全參考質量評價，全參考質量評價算法在評價失真圖片的質量時，需要該失真圖像所對應的參考圖片；第二種是半參考質量評價，半參考質量評價算法在評價失真圖片的質量時，僅需要該失真圖像所對應的參考圖片的部分信息；然而這兩種算法在預測圖像質量時都需要參考圖片，但是，在大多數的實際應用場景中，參考圖像都是不可獲取的。第三種類型是無參考質量評價，無參考質量評價算法在評價失真圖像的質量時，不需要額外的參考圖片信息，因此，無參考圖片質量評價的應用場景更廣，收到的關注度也更高。