[發(fā)明專利]利用二維輸入選擇對三維深度圖像進行深度雕塑

有效

• 申請?zhí)枺?/td>: 201980063901.6
• 申請日: 2019-09-05
• 公開（公告）號: CN112771438B
• 公開（公告）日: 2023-10-10
• 發(fā)明（設計）人: 薩基·卡茨
• 申請（專利權）人: 美國斯耐普公司
• 主分類號: G02B27/01
• 分類號: G02B27/01
• 代理公司: 北京市中聯(lián)創(chuàng)和知識產(chǎn)權代理有限公司 11364
• 代理人: 李萌;李倩倩

一種深度雕塑系統(tǒng)包括眼戴設備，所述眼戴設備包括框架、連接到所述框架的橫向側(cè)的鏡腿和深度捕捉攝像頭。所述深度雕塑系統(tǒng)還包括用戶輸入設備。由處理器執(zhí)行的編程將深度雕塑系統(tǒng)配置成執(zhí)行經(jīng)由用戶輸入設備跟蹤二維輸入選擇從初始觸摸點到最終觸摸點的運動的功能。相應地，所述深度雕塑系統(tǒng)確定投影至初始觸摸點和最終觸摸點的初始射線和最終射線之間的旋轉(zhuǎn)矩陣。所述深度雕塑系統(tǒng)通過將旋轉(zhuǎn)矩陣應用于初始深度圖像的頂點來生成深度雕塑圖像。所述深度雕塑系統(tǒng)經(jīng)由圖像顯示器來呈現(xiàn)深度雕塑圖像。

相關申請的引用

本申請要求2018年9月26日在美國提交的名稱為“利用二維輸入選擇對三維深度圖像進行深度雕塑”的臨時申請62/736,658號的權益，其內(nèi)容通過引用全文納入本申請中。

技術領域

本主題涉及允許用戶使用二維輸入來改變?nèi)S空間的可穿戴設備(如眼戴設備)以及移動設備和技術。

背景

包括便攜式眼戴設備(如智能眼戴設備、頭飾和頭戴設備)在內(nèi)的可穿戴設備等計算設備、移動設備(如平板電腦、智能手機和筆記本電腦)以及當前的個人計算機都集成了圖像顯示器和攝像頭。利用二維(2D)輸入在計算設備上觀看、操縱所顯示的三維(3D)圖像內(nèi)容(例如視頻、圖片等)并與其交互可能很難，利用二維(2D)輸入包括利用觸摸屏設備、觸筆或計算機鼠標等。例如，在二維空間中操縱三維圖像很難結合到計算設備中。

圖形用戶界面(GUI)是一種用戶界面，其允許用戶通過二級符號等圖形圖標和視覺指示符來導航計算設備，而不是基于文本的用戶界面。利用二維輸入在圖像顯示器上導航所顯示的三維GUI內(nèi)容是很麻煩的。

在計算設備上查看三維空間需要許多次鼠標點擊和用計算機鼠標進行選擇。因此，存在利用二維用戶輸入來簡化用戶與三維圖像交互的需要。

附圖簡述

附圖中僅以例舉的方式而非限定的方式示出了一個或多個實施例，在附圖中相同的附圖標記表示相同或類似的元件。

圖1A是深度雕塑系統(tǒng)中使用的眼戴設備示例硬件配置的右側(cè)視圖，其中用戶的二維輸入選擇被應用于初始深度圖像以生成深度雕塑圖像。

圖1B是圖1A眼戴設備右組塊的橫截面頂視圖，描述了深度捕捉攝像頭的右側(cè)可見光攝像頭和電路板。

圖1C是圖1A眼戴設備示例硬件配置的左側(cè)視圖，其示出了深度捕捉攝像頭的左側(cè)可見光攝像頭。

圖1D是圖1C眼戴設備左組塊的橫截面頂視圖，描述了深度捕捉攝像頭的左側(cè)可見光攝像頭和電路板。

圖2A是深度雕塑系統(tǒng)中使用的眼戴設備另一示例硬件配置的右側(cè)視圖，其示出了深度捕捉攝像頭的右側(cè)可見光攝像頭和深度傳感器以生成初始深度圖像。

圖2B和2C是包括兩種不同類型圖像顯示器的眼戴設備示例硬件配置的后視圖。

圖3示出了圖2A眼戴設備的后透視截面圖，描述了深度傳感器的紅外攝像頭、框架前部、框架后部和電路板。

圖4是穿過圖3眼戴設備紅外攝像頭和框架截取的截面圖。

圖5示出了圖2A眼戴設備的后透視圖，描述了深度傳感器的紅外發(fā)射器、深度傳感器的紅外攝像頭、框架前部、框架后部和電路板。

圖6是穿過圖5眼戴設備紅外發(fā)射器和框架截取的截面圖。

圖7描述了由眼戴設備深度傳感器的紅外發(fā)射器發(fā)射的紅外光圖案和由眼戴設備深度傳感器的紅外攝像頭捕捉的紅外光發(fā)射圖案反射變化的示例，以測量原始圖像中像素的深度，從而生成初始深度圖像。

圖8A描述了由深度傳感器的紅外攝像頭捕捉的紅外光作為紅外圖像以及由可見光攝像頭捕捉的可見光作為原始圖像以生成三維場景的初始深度圖像的示例。