[發(fā)明專利]用于創(chuàng)建環(huán)境并用于共享環(huán)境中基于位置的體驗(yàn)的系統(tǒng)和方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201380010615.6
• 申請(qǐng)日: 2013-02-22
• 公開(kāi)（公告）號(hào): CN104641399B
• 公開(kāi)（公告）日: 2018-11-23
• 發(fā)明（設(shè)計(jì)）人: 查爾斯·D·休斯頓;克里斯·科爾曼
• 申請(qǐng)（專利權(quán)）人: 查爾斯·D·休斯頓;克里斯·科爾曼
• 主分類號(hào): G06T17/00
• 分類號(hào): G06T17/00;G06F17/30
• 代理公司: 上海專利商標(biāo)事務(wù)所有限公司 31100
• 代理人: 宋靜嫻

一種用于創(chuàng)建環(huán)境并用于基于該環(huán)境來(lái)共享體驗(yàn)的系統(tǒng)，包括多個(gè)移動(dòng)設(shè)備，該移動(dòng)設(shè)備具有用在興趣點(diǎn)附近來(lái)捕捉興趣點(diǎn)附近的隨機(jī)、眾源的圖像以及相關(guān)聯(lián)的元數(shù)據(jù)的相機(jī)，其中，每一個(gè)圖像的元數(shù)據(jù)都包括移動(dòng)設(shè)備的位置和相機(jī)的取向。優(yōu)選地，圖像包括深度相機(jī)信息。無(wú)線網(wǎng)絡(luò)與移動(dòng)設(shè)備進(jìn)行通信以接受圖像和元數(shù)據(jù)，且構(gòu)建并存儲(chǔ)該區(qū)域的點(diǎn)云或3D模型。用戶連接到此體驗(yàn)平臺(tái)，以從用戶選擇的位置和取向查看3D模型，并例如，利用社交網(wǎng)絡(luò)參與體驗(yàn)。

背景

1.技術(shù)領(lǐng)域

本發(fā)明涉及用于創(chuàng)建包括虛擬模型和圖像的室內(nèi)和戶外環(huán)境的系統(tǒng)和方法，以及使用這樣創(chuàng)建的環(huán)境的方法和系統(tǒng)。在優(yōu)選形式中，部分地使用眾源的圖像和元數(shù)據(jù)來(lái)創(chuàng)建環(huán)境，且環(huán)境被應(yīng)用于社交媒體應(yīng)用。

2.對(duì)相關(guān)技術(shù)的描述

Microsoft、Google，以及Nokia(Navteq)已經(jīng)采用移動(dòng)街道汽車通過(guò)世界上的大多數(shù)主要城市來(lái)當(dāng)汽車在街道上遍歷時(shí)捕捉建筑物和環(huán)境的圖像。在一些情況下，激光雷達(dá)成像(例如，光檢測(cè)及測(cè)距或“LIDAR”)還捕捉來(lái)自汽車的測(cè)距數(shù)據(jù)，以捕捉與建筑物和街道位置和結(jié)構(gòu)有關(guān)的數(shù)據(jù)，諸如建筑物高度。由行駛中的汽車捕捉到的圖像包括用戶可從地圖服務(wù)訪問(wèn)的照片和視頻圖像(以及在很多情況下，衛(wèi)星圖像)。例如，從Google Maps和Google Earth訪問(wèn)來(lái)自Google的Street View，并提供當(dāng)獲取汽車沿著主要街道移動(dòng)時(shí)從獲取汽車獲取的全景圖像。來(lái)自微軟的Bing Maps是類似的，參見(jiàn)如，美國(guó)專利公開(kāi)No.2011/0173565和WO 2012/002811。Earthmine是類似的，但是，使用Mars收集系統(tǒng)。Nokia具有其自己的類似地操作的版本，稱為“Journey View”。這樣的圖像非常有用，但是，獲取僅限于沿著主要干道行駛的專用車輛。其他方法使用從飛機(jī)捕捉到的光學(xué)和LIDAR數(shù)據(jù)。

出現(xiàn)了照片共享站點(diǎn)，其中基于web的照片儲(chǔ)存庫(kù)(Photobucket)與被授權(quán)的用戶共享事件的照片。示例包括Flickr、Photobucket、Picasa、Shutterfly、BeamrandSnapfish。進(jìn)一步地，諸如Facebook和Google+之類的社交網(wǎng)絡(luò)使用戶組張貼事件的照片并與朋友共享照片。這樣的照片儲(chǔ)存庫(kù)和社交網(wǎng)絡(luò)對(duì)于與朋友共享事件是有用的，但是，在真實(shí)性和交互方面受到限制。進(jìn)一步地，許多社交網(wǎng)絡(luò)作為照片儲(chǔ)存庫(kù)來(lái)操作，傳統(tǒng)的照片儲(chǔ)存庫(kù)已經(jīng)變?yōu)樯缃痪W(wǎng)絡(luò)——模糊它們之間的區(qū)別。進(jìn)一步地，照片改進(jìn)的站點(diǎn)變得常見(jiàn)。例如，Instagram、Camera+，以及Pinterest。

需要?jiǎng)?chuàng)建環(huán)境并更新環(huán)境的準(zhǔn)確的方法和系統(tǒng)，以便它是準(zhǔn)確的、特征豐富的、且當(dāng)前的。例如，美國(guó)專利公開(kāi)No.2011/0313779說(shuō)明了通過(guò)收集用戶反饋來(lái)更新興趣點(diǎn)的一種方法。另外，很多環(huán)境簡(jiǎn)直不可用，諸如停車場(chǎng)、室內(nèi)位置和主要城市中的主要街道以外的任何位置。進(jìn)一步地，能夠在超出只共享在事件之后張貼的事件的照片之外還共享基于位置的體驗(yàn)將是一個(gè)進(jìn)步。

相關(guān)的專利和申請(qǐng)描述了對(duì)基于位置的體驗(yàn)的各種改進(jìn)，例如：美國(guó)專利No.7,855,638和7,518,501和美國(guó)專利公開(kāi)No.2011/0282799、2007/00188802012/0007885以及2008/0259096(有時(shí)被稱為“相關(guān)專利”)。通過(guò)引用在法律允許的最大程度上結(jié)合此處所引用的所有參考文獻(xiàn)，但是，這樣的結(jié)合不應(yīng)該解釋為參考文獻(xiàn)現(xiàn)有技術(shù)的承認(rèn)。

發(fā)明內(nèi)容

通過(guò)根據(jù)本發(fā)明的用于創(chuàng)建并共享環(huán)境和體驗(yàn)的系統(tǒng)和方法來(lái)解決上文所概述的問(wèn)題。廣泛地說(shuō)，用于創(chuàng)建環(huán)境并用于共享體驗(yàn)的系統(tǒng)包括多個(gè)移動(dòng)設(shè)備，它們具有用在興趣點(diǎn)附近來(lái)捕捉所述興趣點(diǎn)附近的隨機(jī)圖像和相關(guān)聯(lián)的元數(shù)據(jù)的相機(jī)，其中，每一個(gè)圖像的元數(shù)據(jù)都包括移動(dòng)設(shè)備的位置和相機(jī)的取向。無(wú)線網(wǎng)絡(luò)與移動(dòng)設(shè)備進(jìn)行通信以接受圖像和元數(shù)據(jù)。圖像處理服務(wù)器連接到網(wǎng)絡(luò)，用于接收?qǐng)D像和元數(shù)據(jù)，其中服務(wù)器處理圖像以確定圖像中的各種目標(biāo)的位置，并構(gòu)建興趣點(diǎn)附近的區(qū)域的3D模型。優(yōu)選地，體驗(yàn)平臺(tái)連接到圖像處理服務(wù)器，以便存儲(chǔ)3D模型。多個(gè)用戶連接到體驗(yàn)平臺(tái)，以從用戶選擇的位置和取向來(lái)查看興趣點(diǎn)。