[發明專利]用于生成虛擬視點圖像的設備和方法

在審

• 申請號: 201710252123.8
• 申請日: 2017-04-18
• 公開（公告）號: CN107590857A
• 公開（公告）日: 2018-01-16
• 發明（設計）人: 申泓昌;李光淳;李珍煥;許南淏
• 申請（專利權）人: 韓國電子通信研究院
• 主分類號: G06T19/00
• 分類號: G06T19/00
• 代理公司: 北京市柳沈律師事務所11105
• 代理人: 李芳華

1.一種用于生成虛擬視點圖像的設備，包括：

分段圖像生成單元，用于將與不同視點對應的基礎圖像和參考圖像的每一個分段為片段單元；

視差計算單元，用于通過計算被分段為片段單元的基礎圖像和參考圖像之間的視差值，來生成基礎視差圖像和參考視差圖像；

圖像映射單元，用于使用所述視差值將基礎視差圖像和參考視差圖像映射到虛擬視點；和

虛擬視點圖像生成單元，用于通過合成其中將基礎視差圖像映射到虛擬視點的第一映射圖像和其中將參考視差圖像映射到虛擬視點的第二映射圖像，而生成與該虛擬視點對應的虛擬視點圖像。

2.根據權利要求1的設備，其中該圖像映射單元基于基礎視差圖像和參考視差圖像執行后向映射。

3.根據權利要求2的設備，其中該圖像映射單元基于塊單元執行映射，該塊單元的尺寸等于或大于該片段單元的尺寸。

4.根據權利要求2的設備，其中該圖像映射單元通過分派取決于基礎視差圖像或參考視差圖像的片段中的中心點與另一像素之間的距離的映射權重，來執行映射。

5.根據權利要求1的設備，其中該圖像映射單元使用基礎圖像、基礎視差圖像、參考圖像、和參考視差圖像中的至少兩個來執行映射。

6.根據權利要求5的設備，其中，當使用從基礎圖像、基礎視差圖像、參考圖像、和參考視差圖像中選擇的三個圖像執行映射時，該圖像映射單元通過向基礎圖像和參考圖像的每一個分派混合權重，來執行映射。

7.根據權利要求6的設備，其中使用基礎圖像的視點和虛擬視點之間的距離以及參考圖像的視點和虛擬視點之間的距離中的至少一個，來計算混合權重。

8.根據權利要求2的設備，其中該虛擬視點圖像生成單元通過向第一映射圖像和第二映射圖像中的每一個分派合成權重，來生成虛擬視點圖像。

9.根據權利要求8的設備，其中使用基礎圖像的視點和虛擬視點之間的距離以及參考圖像的視點和虛擬視點之間的距離中的至少一個，來設置合成權重。

10.根據權利要求8的設備，其中使用映射到與同一像素對應的位置的、基礎圖像中的像素值和參考圖像中的像素值之間的誤差值，來設置合成權重。

11.根據權利要求1的設備，進一步包括：

圖像內插單元，用于填充該虛擬視點圖像中的洞。

12.根據權利要求11的設備，其中該圖像內插單元使用基于與該洞對應的空間軸和時間軸中的至少一個相鄰的區域中的像素的值，來填充該洞。

13.根據權利要求1的設備，其中該虛擬視點位于該基礎圖像的視點和該參考圖像的視點之間，并且該虛擬視點由用戶設置，或者是預置值。

14.根據權利要求1的設備，其中該分段圖像生成單元通過執行均勻分段和非均勻分段中的至少一個，來對基礎圖像和參考圖像進行分段。

15.一種由用于生成虛擬視點圖像的設備執行的用于生成虛擬視點圖像的方法，包括：

將與不同視點對應的基礎圖像和參考圖像的每一個分段為片段單元；

通過計算被分段為片段單元的基礎圖像和參考圖像之間的視差值，來生成基礎視差圖像和參考視差圖像；

使用視差值將基礎視差圖像和參考視差圖像映射到虛擬視點；和

通過合成其中將基礎視差圖像映射到虛擬視點的第一映射圖像和其中將參考視差圖像映射到虛擬視點的第二映射圖像，而生成與該虛擬視點對應的虛擬視點圖像。

16.根據權利要求15的方法，其中映射基礎視差圖像和參考視差圖像被配置為基于基礎視差圖像和參考視差圖像執行后向映射。

17.根據權利要求16的方法，其中映射基礎視差圖像和參考視差圖像被配置為基于其尺寸等于或大于片段單元的尺寸的塊單元來執行映射。

18.根據權利要求16的方法，其中映射基礎視差圖像和參考視差圖像被配置為通過分派取決于基礎視差圖像或參考視差圖像的片段中的中心點與另一像素之間的距離的映射權重，來執行映射。