[發(fā)明專利]圖像處理設(shè)備和圖像處理方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201780048137.6
• 申請(qǐng)日: 2017-07-27
• 公開（公告）號(hào): CN109564698B
• 公開（公告）日: 2023-05-26
• 發(fā)明（設(shè)計(jì)）人: 泉伸明
• 申請(qǐng)（專利權(quán)）人: 索尼公司
• 主分類號(hào): G06T15/04
• 分類號(hào): G06T15/04;G06T17/00;H04N23/90;H04N13/00;H04N13/239
• 代理公司: 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司 11227
• 代理人: 陳煒

本公開涉及一種圖像處理設(shè)備和圖像處理方法，其使得能夠使用兩個(gè)視點(diǎn)的表示更多區(qū)域的三維結(jié)構(gòu)的紋理圖像和深度圖像來生成圖像。繪制部使用通過將多邊形的背面投影到與視線方向垂直的投影面獲得的紋理圖像和與每個(gè)視點(diǎn)的紋理圖像相對(duì)應(yīng)的深度圖像來生成預(yù)定視點(diǎn)的紋理圖像，所述視線方向從跨越多邊形的中心彼此相對(duì)的兩個(gè)視點(diǎn)中的每一個(gè)指向多邊形的中心。本公開可以應(yīng)用于例如顯示設(shè)備等。

技術(shù)領(lǐng)域

本公開涉及一種圖像處理設(shè)備和圖像處理方法，尤其涉及一種使得能夠使用兩個(gè)視點(diǎn)的紋理圖像和深度圖像來表示更多區(qū)域的三維結(jié)構(gòu)的圖像處理設(shè)備和圖像處理方法。

背景技術(shù)

作為用于表示對(duì)象的三維結(jié)構(gòu)的技術(shù)，主要有使用對(duì)象的多邊形(3D網(wǎng)格)和粘貼到多邊形的紋理來表示對(duì)象的三維結(jié)構(gòu)的技術(shù)，以及使用通過相對(duì)于多個(gè)視點(diǎn)透視投影對(duì)象而獲得的紋理圖像和深度圖像來表示對(duì)象的三維結(jié)構(gòu)的技術(shù)。前一種技術(shù)是通用CG(計(jì)算機(jī)圖形)技術(shù)中使用的一種技術(shù)。后一種技術(shù)(以下稱為2D深度技術(shù))對(duì)于作為通過透視投影成像對(duì)象而獲得的圖像的拾取圖像具有高親和性。

在通過2D深度技術(shù)來表示對(duì)象的三維結(jié)構(gòu)的情況下，使用諸如MPEG?MVD(運(yùn)動(dòng)圖像專家組階段多視圖+深度)的編碼方法對(duì)表示三維結(jié)構(gòu)的數(shù)據(jù)進(jìn)行編碼(例如，參考NPL1)。

[引文列表]

[非專利文獻(xiàn)]

[NPL?1]

Takanori?SENOH、Kenji?YAMAMOTO、Ryutaro?OI和Taiichiro?KURITA“MPEGMulti-View?Image?Coding?Standardization”，《國(guó)家信息和通信技術(shù)研究所雜志》第56卷第1/2期，2010年3月發(fā)行。

發(fā)明內(nèi)容

[技術(shù)問題]

如上所述，2D深度技術(shù)是使用通過相對(duì)于多個(gè)視點(diǎn)透視投影對(duì)象而獲得的紋理圖像(二維圖像)和與紋理圖像相對(duì)應(yīng)的深度圖像來表示對(duì)象的三維結(jié)構(gòu)的技術(shù)。因此，2D深度技術(shù)不能表示對(duì)象未透視投影到的區(qū)域的三維結(jié)構(gòu)。

因此，通過增加透視投影的視點(diǎn)數(shù)量以增加要透視投影的區(qū)域，可以表示更多區(qū)域的三維結(jié)構(gòu)。然而，隨著用于透視投影的視點(diǎn)的數(shù)量增加，表示三維結(jié)構(gòu)所需的數(shù)據(jù)量增加。

鑒于如上所述的這種情況做出了本公開，并且本公開使得能夠使用兩個(gè)視點(diǎn)的紋理圖像和深度圖像來表示更多區(qū)域的三維結(jié)構(gòu)。

[問題的解決方案]

本公開的第一方面的圖像處理設(shè)備包括圖像生成部，該圖像生成部配置成使用通過將多邊形的背面投影到與視線方向(從跨越多邊形中心彼此相對(duì)的兩個(gè)視點(diǎn)中的每一個(gè)指向多邊形中心)垂直的投影面獲得的紋理圖像和與每個(gè)視點(diǎn)的紋理圖像相對(duì)應(yīng)的深度圖像來生成預(yù)定視點(diǎn)的紋理圖像。

本公開第一方面的圖像處理方法對(duì)應(yīng)于本公開第一方面的圖像處理設(shè)備。

在本公開的第一方面，使用通過將多邊形的背面投影到與視線方向(從跨越多邊形中心彼此相對(duì)的兩個(gè)視點(diǎn)中的每一個(gè)指向多邊形中心)垂直的投影面獲得的紋理圖像和與每個(gè)視點(diǎn)的紋理圖像相對(duì)應(yīng)的深度圖像生成了預(yù)定視點(diǎn)的紋理圖像。

本公開的第二方面的圖像處理設(shè)備包括圖像生成部，該圖像生成部配置成通過將多邊形的背面投影到與視線方向(從跨越多邊形中心彼此相對(duì)的兩個(gè)視點(diǎn)中的每一個(gè)指向多邊形中心)垂直的投影面來生成紋理圖像，并生成與每個(gè)視點(diǎn)的紋理圖像相對(duì)應(yīng)的深度圖像。

本公開的第二方面的圖像處理方法對(duì)應(yīng)于本公開的第二方面的圖像處理設(shè)備。

在本公開的第二方面，將多邊形的背面投影到與視線方向(從跨越多邊形中心彼此相對(duì)的兩個(gè)視點(diǎn)中的每一個(gè)指向多邊形中心)垂直的投影面生成了紋理圖像，并生成了與每個(gè)視點(diǎn)的紋理圖像相對(duì)應(yīng)的深度圖像。