[發明專利]去除3D格式視頻或圖像中的反射光斑的方法

有效

• 申請號: 202011640777.6
• 申請日: 2020-12-31
• 公開（公告）號: CN112634304B
• 公開（公告）日: 2022-09-13
• 發明（設計）人: 孟乒乒;朱志林;張偉香;潘博;方勇
• 申請（專利權）人: 上海易維視科技有限公司
• 主分類號: G06T7/13
• 分類號: G06T7/13;G06T7/136;G06T5/00
• 代理公司: 上海金盛協力知識產權代理有限公司 31242
• 代理人: 王松

1.一種去除3D格式視頻或圖像中的反射光斑的方法，其特征在于，所述方法包括：

步驟S1、通過圖像二值化處理，設置反射光斑強度閾值范圍，得到左右圖反射光斑mask圖M_l和M_r；采用圖像形態學中的膨脹操作方法，使局部高密度的反射光斑融合成一個整體區域，增大反射光斑區域；然后通過輪廓檢測，確定反射光斑的大小和數量，用于下一步左右圖像反射光斑的匹配；

步驟S2、根據左右圖像視差，對左右圖像中出現的反射光斑進行匹配；

步驟S3、基于左右圖匹配的反射光斑mask圖和左右圖的視差，得到對應反射光斑區域一致的左右圖像的反射光斑mask圖；

步驟S4、基于Telea圖像修復的方法和新的反射光斑mask圖，對圖像中的反射光斑進行去除。

2.根據權利要求1所述的去除3D格式視頻或圖像中的反射光斑的方法，其特征在于：

對反射光斑的大小進行篩選，對于反射光斑小于設定閾值的區域直接對反射光斑去除；對于反射光斑大于設定閾值的區域，需要確保左右圖像對應的反射光斑區域一致，這樣才能在合成3D的時候不會因為左右圖像反射光斑區域不一致導致觀看不舒適。

3.根據權利要求2所述的去除3D格式視頻或圖像中的反射光斑的方法，其特征在于：

通過采用SAD算法對左右圖進行立體匹配，獲取視差圖；以左圖的M_l為基準，在右圖M_r中根據視差值D找到對應匹配的反射光斑區域，將該反射光斑區域整體平移D個單位像素后疊加在左圖上，得到左右圖像反射光斑匹配后的mask圖M_m。

4.根據權利要求1所述的去除3D格式視頻或圖像中的反射光斑的方法，其特征在于：

所述步驟S3中，根據匹配得到的mask圖M_m，進行形態學的膨脹處理，進一步融合左右圖像的反射光斑為一個整體區域；

M_m作為新的左圖反射光斑mask圖M_newL，根據所述步驟S2計算得到的視差，對M_m中的所有反射光斑區域反向平移對應的視差距離，得到新的右圖反射光斑mask圖M_newR。

5.根據權利要求1所述的去除3D格式視頻或圖像中的反射光斑的方法，其特征在于：

所述步驟S4中，根據步驟S3得到的新的左右圖像反射光斑mask圖M_newL和M_newR，基于Telea圖像修復的方法，從M_newL和M_newR中的反射光斑區域的四周開始，利用周邊像素由下式計算反射光斑邊緣的像素值，不斷迭代計算，直到反射光斑區域全部計算完畢；

其中：ω(p,q)為權值函數，確定鄰域像素權重大小。