[發(fā)明專利]使用可穿戴設(shè)備識別可控設(shè)備的位置

在審

• 申請?zhí)枺?/td>: 202080106474.8
• 申請日: 2020-11-16
• 公開（公告）號: CN116324675A
• 公開（公告）日: 2023-06-23
• 發(fā)明（設(shè)計）人: 吳升知;亞歷山大·詹姆斯·法堡
• 申請（專利權(quán)）人: 谷歌有限責(zé)任公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 中原信達知識產(chǎn)權(quán)代理有限責(zé)任公司 11219
• 代理人: 李寶泉;周亞榮

根據(jù)一方面，一種識別可控設(shè)備的位置的方法包括：從可穿戴設(shè)備上的圖像傳感器接收視覺數(shù)據(jù)；由對象辨識模塊基于該視覺數(shù)據(jù)生成識別數(shù)據(jù)；以及使用該視覺數(shù)據(jù)從存儲包括第一三維(3D)地圖和第二3D地圖的多個3D地圖的地圖數(shù)據(jù)庫中識別第一3D地圖，其中第一3D地圖與第一可控設(shè)備相關(guān)聯(lián)，并且第二3D地圖與第二可控設(shè)備相關(guān)聯(lián)。該方法包括基于第一3D地圖的視覺定位數(shù)據(jù)獲得第一可控設(shè)備在物理空間中的位置，以及在顯示器上在第一可控設(shè)備的位置的閾值距離內(nèi)的位置中渲染用戶界面(UI)對象。

技術(shù)領(lǐng)域

本描述大體上涉及使用可穿戴設(shè)備獲得可控設(shè)備的位置。

背景技術(shù)

可穿戴設(shè)備可以用于控制一個或多個可控設(shè)備，諸如媒體流設(shè)備、家庭揚聲器、智能燈泡等。在一些示例中，可穿戴設(shè)備包括捕捉視覺數(shù)據(jù)的攝像機和處理圖像數(shù)據(jù)以檢測可穿戴設(shè)備的攝像機的視場中的設(shè)備的圖像辨識軟件，這可以獲得該設(shè)備的二維(2D)位置。然而，2D位置可能不足以在可穿戴設(shè)備的顯示器上接近該設(shè)備在3D空間中的位置的位置中渲染用戶界面(UI)控件，使得用戶可以用交互式UI來控制該設(shè)備或者被呈現(xiàn)關(guān)于該設(shè)備的附加信息。此外，根據(jù)一些常規(guī)技術(shù)，如果用戶具有多個看起來相似的設(shè)備(例如，兩個看起來相同的智能燈泡)，則可穿戴設(shè)備可能無法區(qū)分多個設(shè)備以控制用戶所預(yù)期的設(shè)備。

發(fā)明內(nèi)容

根據(jù)一方面，一種使用可穿戴設(shè)備來識別可控設(shè)備的位置的方法包括：從可穿戴設(shè)備上的圖像傳感器接收視覺數(shù)據(jù)；由對象辨識模塊基于該視覺數(shù)據(jù)生成識別數(shù)據(jù)；以及使用該識別數(shù)據(jù)從存儲包括第一三維(3D)地圖和第二3D地圖的多個3D地圖的地圖數(shù)據(jù)庫中識別該第一3D地圖，其中第一3D地圖與第一可控設(shè)備相關(guān)聯(lián)，并且第二3D地圖與第二可控設(shè)備相關(guān)聯(lián)。該方法包括基于第一3D地圖的視覺定位數(shù)據(jù)獲得第一可控設(shè)備在物理空間中的位置，以及在可穿戴設(shè)備的顯示器上在第一可控設(shè)備的位置的閾值距離內(nèi)的位置中渲染用戶界面(UI)對象。在一些示例中，UI對象被渲染在顯示器上對應(yīng)于第一可控設(shè)備的位置的位置處。

根據(jù)一些方面，該方法可以包括以下特征中的一個或多個(或其任何組合)。該位置包括可控設(shè)備的六自由度位置。識別數(shù)據(jù)可以包括第一可控設(shè)備的設(shè)備名稱或設(shè)備類型中的至少一個。識別數(shù)據(jù)可以包括與第一可控設(shè)備相關(guān)聯(lián)的物理空間的空間類型。識別數(shù)據(jù)與第一3D地圖相關(guān)聯(lián)地存儲在地圖數(shù)據(jù)庫中。該方法可以包括比較視覺數(shù)據(jù)與第一3D地圖。該方法可以包括在與第一可控設(shè)備相關(guān)聯(lián)的設(shè)置過程期間生成第一3D地圖。第一3D地圖可以包括對應(yīng)于虛擬云錨點的特征點地圖，并且虛擬云錨點被配置成與一個或多個其他用戶共享。UI對象可以包括允許用戶控制第一可控設(shè)備的一個或多個控件。

根據(jù)一方面，一種非暫時性計算機可讀介質(zhì)存儲可執(zhí)行指令，這些可執(zhí)行指令在由至少一個處理器執(zhí)行時被配置成使得至少一個處理器：從可穿戴設(shè)備上的圖像傳感器接收視覺數(shù)據(jù)；由對象辨識模塊基于該視覺數(shù)據(jù)來生成識別數(shù)據(jù)；使用識別數(shù)據(jù)來從存儲包括第一三維(3D)地圖和第二3D地圖的多個3D地圖的地圖數(shù)據(jù)庫中識別第一3D地圖，其中第一3D地圖與第一可控設(shè)備相關(guān)聯(lián)，并且第二3D地圖與第二可控設(shè)備相關(guān)聯(lián)；基于第一3D地圖的視覺定位數(shù)據(jù)來獲得第一可控設(shè)備在至少部分由視覺數(shù)據(jù)表示的物理空間中的位置；以及在可穿戴設(shè)備的顯示器上在第一可控設(shè)備的位置的閾值距離內(nèi)的位置中渲染用戶界面(UI)對象，其中UI對象包括一個或多個交互式控件以控制第一可控設(shè)備。在一些示例中，UI對象被渲染在顯示器上對應(yīng)于第一可控設(shè)備的位置(例如，六DoF位置)的位置處。