[發(fā)明專利]用于照明混合現(xiàn)實(shí)對(duì)象的環(huán)境合成

在審

• 申請(qǐng)?zhí)枺?/td>: 201910426485.3
• 申請(qǐng)日: 2019-05-22
• 公開（公告）號(hào): CN110517355A
• 公開（公告）日: 2019-11-29
• 發(fā)明（設(shè)計(jì)）人: D·庫爾茨;G·索馬納斯;T·霍爾
• 申請(qǐng)（專利權(quán)）人: 蘋果公司
• 主分類號(hào): G06T19/00
• 分類號(hào): G06T19/00
• 代理公司: 11038 中國(guó)國(guó)際貿(mào)易促進(jìn)委員會(huì)專利商標(biāo)事務(wù)所
• 代理人: 吳信剛<國(guó)際申請(qǐng)>=<國(guó)際公布>=<進(jìn)入

1.一種用于在計(jì)算機(jī)生成現(xiàn)實(shí)CGR環(huán)境中基于表面合成而渲染CGR對(duì)象的反射表面的方法，包括：

在具有一個(gè)或多個(gè)處理器和計(jì)算機(jī)可讀介質(zhì)的設(shè)備處：

確定CGR環(huán)境的第一幾何形狀和紋理信息，其中所述CGR環(huán)境基于物理場(chǎng)景的一個(gè)或多個(gè)相機(jī)圖像；

確定所述CGR環(huán)境包括具有缺失部分的表面；

生成用于所述缺失部分的擴(kuò)展部分；

基于所述擴(kuò)展部分確定表示所述物理場(chǎng)景的所述CGR環(huán)境的第二幾何形狀；

使用所確定的第二幾何形狀和所述紋理信息來生成環(huán)境地圖；以及

在所述CGR環(huán)境中渲染CGR對(duì)象，其中基于所述環(huán)境地圖來確定所述CGR對(duì)象的反射表面的外觀。

2.根據(jù)權(quán)利要求1所述的方法，還包括：

確定所述CGR對(duì)象在所述CGR環(huán)境中的三維3D位置；以及

確定所述CGR對(duì)象的反射率，其中所述CGR對(duì)象的所述反射表面的所述外觀至少部分地基于所述CGR對(duì)象的所述3D位置和所述反射率。

3.根據(jù)權(quán)利要求2所述的方法，其中至少部分地基于所述CGR對(duì)象的所述3D位置、幾何形狀和所述反射率來確定所述擴(kuò)展部分的尺寸。

4.根據(jù)權(quán)利要求1所述的方法，還包括：

混合所述擴(kuò)展部分和至少一個(gè)相鄰部分。

5.根據(jù)權(quán)利要求1所述的方法，還包括：

基于所述CGR對(duì)象的三維3D位置來選擇所述環(huán)境地圖的投影中心，其中生成所述環(huán)境地圖至少部分地基于所述環(huán)境地圖的所述投影中心。

6.根據(jù)權(quán)利要求1所述的方法，其中至少部分地基于多個(gè)擴(kuò)展部分確定所述第二幾何形狀。

7.根據(jù)權(quán)利要求1所述的方法，還包括：

生成多個(gè)環(huán)境地圖；以及

在所述CGR環(huán)境中渲染多個(gè)CGR對(duì)象，其中基于所述多個(gè)環(huán)境地圖來確定所述多個(gè)CGR對(duì)象的反射表面的外觀。

8.根據(jù)權(quán)利要求1所述的方法，其中所述紋理信息包括有關(guān)顏色、圖案、反射率或輻照度的信息。

9.根據(jù)權(quán)利要求1所述的方法，還包括：

從所述物理場(chǎng)景的所述一個(gè)或多個(gè)相機(jī)圖像識(shí)別最暗紋理，其中所述紋理信息至少部分地基于所述最暗紋理。

10.根據(jù)權(quán)利要求1所述的方法，還包括：

確定所述環(huán)境地圖包括沒有對(duì)應(yīng)紋理的像素；

為沒有對(duì)應(yīng)紋理的所述像素生成合成紋理；以及

通過用所述合成紋理替換沒有對(duì)應(yīng)紋理的所述像素，增強(qiáng)所述環(huán)境地圖。

11.根據(jù)權(quán)利要求1所述的方法，其中所述CGR環(huán)境中的所述CGR對(duì)象被呈現(xiàn)在屏幕上或半透明顯示裝置上。

12.一種用于在計(jì)算機(jī)生成現(xiàn)實(shí)CGR環(huán)境中基于環(huán)境地圖合成而渲染CGR對(duì)象的反射表面的方法，包括：

在具有一個(gè)或多個(gè)處理器和計(jì)算機(jī)可讀介質(zhì)的設(shè)備處：

確定CGR環(huán)境的第一幾何形狀和紋理信息，其中所述CGR環(huán)境基于物理場(chǎng)景的一個(gè)或多個(gè)相機(jī)圖像；

生成環(huán)境地圖，所述環(huán)境地圖包括所確定的第一幾何形狀和所確定的紋理信息；

確定所述環(huán)境地圖包括沒有對(duì)應(yīng)紋理的像素；

為沒有對(duì)應(yīng)紋理的所述像素生成合成紋理；

通過用所述合成紋理替換沒有對(duì)應(yīng)紋理的所述像素，增強(qiáng)所述環(huán)境地圖；以及

在所述CGR環(huán)境中渲染CGR對(duì)象，其中基于完成的環(huán)境地圖來確定所述CGR對(duì)象的反射表面的外觀。

13.根據(jù)權(quán)利要求12所述的方法，還包括：

確定所述CGR對(duì)象在所述CGR環(huán)境中的三維3D位置；以及

確定所述CGR對(duì)象的反射率，其中所述CGR對(duì)象的所述反射表面的所述外觀至少部分地基于所述CGR對(duì)象的所述3D位置和所述反射率。