[發明專利]三維遙現終端及方法

有效

• 申請號: 201780047564.2
• 申請日: 2017-09-08
• 公開（公告）號: CN109565567B
• 公開（公告）日: 2020-12-08
• 發明（設計）人: 丹尼爾·戈德曼;杰森·勞倫斯;安德魯·胡伊博斯;安德魯·伊安·拉塞爾;史蒂文·M·塞茨
• 申請（專利權）人: 谷歌有限責任公司
• 主分類號: H04N7/14
• 分類號: H04N7/14;H04N7/15
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 周亞榮;安翔

1.一種遙現終端，包括：

顯示器，所述顯示器包括設置在像素網格前面的微透鏡陣列；

圖像傳感器；

紅外發射器；

紅外深度傳感器；

處理設備；以及

存儲器，所述存儲器存儲指令，所述指令在被執行時使所述處理設備執行操作，所述操作包括：

基于所述圖像傳感器捕獲的可見光確定圖像數據；

基于由所述紅外發射器發出并由所述紅外深度傳感器捕獲的紅外光確定深度數據；

確定所述遙現終端的用戶的位置；

將所述深度數據和所述圖像數據傳達到遠程的遙現終端；

接收遠程圖像數據和遠程深度數據，所述遠程圖像數據和遠程深度數據源自遠程的遙現終端；

使用能夠從第一觀看位置通過所述微透鏡陣列觀看的所述像素網格的第一像素子集，基于所述遠程圖像數據生成第一顯示圖像；以及

使用能夠從第二觀看位置通過所述微透鏡陣列觀看的所述像素網格的第二像素子集，基于所述遠程圖像數據和所述遠程深度數據生成第二顯示圖像，所述第一顯示圖像和所述第二顯示圖像被生成以基于所述用戶的所確定的位置來模擬視差，所模擬的視差使所述遠程的遙現終端處的遠程用戶的表示出現在所述微透鏡陣列后面的偏移距離處。

2.根據權利要求1所述的遙現終端，其中，所述遙現終端的所述用戶的所述位置是基于所述深度數據確定的。

3.根據權利要求1所述的遙現終端，其中，所述遙現終端的所述用戶的所述位置是基于所述圖像數據確定的。

4.根據權利要求1所述的遙現終端，還包括：

麥克風組件，所述麥克風組件包括位于所述顯示器的第一側的第一麥克風和位于所述顯示器的第二側的第二麥克風；以及

揚聲器組件，所述揚聲器組件包括位于所述顯示器的所述第一側的第一揚聲器和位于所述顯示器的所述第二側的第二揚聲器；

其中，所述指令還使所述處理設備執行包括以下的操作：

使用所述麥克風組件捕獲定向音頻數據；

將所述定向音頻數據傳送到所述遠程終端；

從所述遠程終端接收遠程定向音頻數據；以及

基于所述遠程定向音頻數據使用所述揚聲器組件輸出音頻。

5.根據權利要求4所述的遙現終端，其中，所述麥克風組件包括超過兩個的麥克風。

6.根據權利要求1所述的遙現終端，其中，所述遙現終端包括相機組件，所述相機組件包括至少一個位于所述顯示器后面的相機單元，其中，所述相機單元包括所述圖像傳感器、所述紅外發射器和所述紅外深度傳感器。

7.根據權利要求6所述的遙現終端，其中，所述顯示器是透明的并且能夠在關閉狀態和照明狀態之間切換，并且其中，所述指令還使所述處理設備執行包括以下的操作：使可見光和紅外光的捕獲與所述顯示器的所述關閉狀態同步。

8.根據權利要求7所述的遙現終端，其中，所述微透鏡陣列中的至少一些微透鏡由第一材料制成，并且所述微透鏡陣列中的所述微透鏡中的至少一些微透鏡由第二材料制成，所述第一材料是實質上不受電流影響的材料，并且所述第二材料是實質上受電流影響的材料，并且所述第一材料和所述第二材料在沒有電流施加到所述第一材料和所述第二材料時具有不同的折射率。

9.根據權利要求1所述的遙現終端，還包括分束器，所述分束器分離入射光并將所述分離的入射光發送到所述圖像傳感器和所述紅外深度傳感器。