[發明專利]立體圖像處理方法、裝置以及立體視頻顯示設備

有效

• 申請號: 201410814752.1
• 申請日: 2014-12-24
• 公開（公告）號: CN105791795B
• 公開（公告）日: 2018-01-26
• 發明（設計）人: 李煒明;劉志花;趙良鎬;王西穎;周明才;薛康;洪濤;馬賡宇;王海濤
• 申請（專利權）人: 北京三星通信技術研究有限公司;三星電子株式會社
• 主分類號: H04N13/122
• 分類號: H04N13/122;H04N13/183;H04N13/30
• 代理公司: 北京英賽嘉華知識產權代理有限責任公司11204
• 代理人: 王達佐,馬曉亞

1.一種立體圖像處理方法，包括：

判斷圖像幀中的立體圖像內容是否存在立體誤差，其中所述圖像幀包括至少兩個不同視角的圖像；

響應于存在立體誤差，檢測所述圖像幀中是否存在與所述立體圖像內容具有不同立體幾何約束的對象；以及

若檢測到所述對象，則針對所述立體圖像內容和所述對象分別進行處理。

2.根據權利要求1所述的方法，其中，針對所述立體圖像內容和所述對象分別進行處理，包括：

將所述對象從所述圖像幀中分割出去；

填補所述圖像幀中由于所述分割產生的圖像空洞；以及

對填補后的圖像幀執行立體校正。

3.根據權利要求2所述的方法，其中，所述對象為所述圖像幀中的后期插入對象，并且將所述對象從所述圖像幀中分割出去基于所述對象的至少一個如下屬性：可預期的形體特征、時域上的穩定性、以及符合標準的立體幾何關系。

4.根據權利要求2或3所述的方法，其中，所述對象是后期插入的字幕，將所述對象從所述圖像幀中分割出去，包括：

從所述圖像幀的不同視角的圖像中分別檢測文字筆畫特征；

提取包含所述文字筆畫特征的字幕框；

在所述字幕框中，根據文字顏色分割出文字像素；以及

將所述文字像素從所述圖像幀中分割出去。

5.根據權利要求4所述的方法，其中，在根據文字顏色分割出文字像素之前，還包括：

通過匹配所述不同視角的圖像的字幕框確定字幕深度；以及

根據字幕深度去除誤檢測的字幕框。

6.根據權利要求2或3所述的方法，其中，所述對象是后期插入的視頻圖標，將所述對象從所述圖像幀中分割出去，包括：

利用預先建立的視頻圖標的模板圖像對所述圖像幀的不同視角的圖像分別進行匹配；以及

將所匹配的區域作為所述視頻圖標從所述圖像幀中分割出去。

7.根據權利要求6所述的方法，其中，所述視頻圖標的模板圖像通過如下離線處理方式來建立：

初始化圖標圖像；

按照時間順序讀取輸入視頻的每一幀圖像并根據相鄰兩幀之間的像素顏色差異更新圖標圖像；以及

將收斂得到的圖標圖像作為所述視頻圖標的模板圖像。

8.根據權利要求2或3所述的方法，其中，所述對象是后期插入的圖形對象，將所述對象從所述圖像幀中分割出去，包括：

將所述圖像幀的不同視角的圖像中的任一圖像分割為多個圖像區域；

針對每個圖像區域，在所述圖像幀的不同視角的圖像中的另一圖像中相同水平線上的每個位置進行匹配；以及

根據匹配結果確定所述圖形對象并將其分割出去。

9.根據權利要求8所述的方法，其中，針對每個圖像區域進行匹配包括：

計算所述圖像區域在所述每個位置的匹配度量,從中找到一個最優匹配度量；并且

所述根據匹配結果確定所述圖形對象并將其分割出去，包括：

判斷所述最優匹配度量是否滿足預設條件；

響應于所述最優匹配度量滿足預設條件，確定所述圖像區域為后期插入的圖形對象；以及

將所述圖形對象從所述圖像幀中分割出去。

10.根據權利要求2所述的方法，其中，填補所述圖像幀中由于所述分割產生的圖像空洞，包括根據周圍圖像的信息，基于以下至少一種方式對所述圖像空洞進行填充：

對于所述圖像空洞中的每個對象像素，使用距離所述對象像素最近的立體圖像內容中的像素來填充；

按照所述圖像空洞周圍的圖像紋理特征，對所述圖像空洞進行填充；

根據所述圖像空洞周圍的物體類別信息推理圖像內容信息，以對所述圖像空洞進行填充；以及

利用所述圖像幀的不同視角的圖像之間的互補信息，對所述圖像空洞進行填充。

11.根據權利要求1所述的方法，其中，判斷圖像幀中的立體圖像內容是否存在立體誤差，包括：

判斷所述圖像幀是否為視頻段的邊界幀；

響應于所述圖像幀是所述視頻段的邊界幀，檢測所述圖像幀中是否存在立體誤差，以及基于檢測結果更新所述視頻段的立體誤差信息以及立體校正變換；以及

響應于所述圖像幀是所述視頻段的非邊界幀，基于所述視頻段的立體誤差信息來判斷是否存在立體誤差。