[發明專利]傳感器組件和頭戴式顯示器

有效

• 申請號: 201810821296.1
• 申請日: 2018-07-24
• 公開（公告）號: CN109298528B
• 公開（公告）日: 2022-06-14
• 發明（設計）人: 劉新橋
• 申請（專利權）人: 臉譜科技有限責任公司
• 主分類號: G02B27/01
• 分類號: G02B27/01;G01D21/02
• 代理公司: 北京安信方達知識產權代理有限公司 11262
• 代理人: 陸建萍;楊明釗

1.一種傳感器系統，包括：

多個傳感器裝置；以及

控制器，所述控制器耦接到所述多個傳感器裝置；

其中，每個傳感器裝置包括：

多個堆疊層中的傳感器層，所述傳感器層包括像素的陣列，所述像素的陣列被配置成捕獲一個或多個第一圖像；以及

所述多個堆疊層中的一個或多個處理層，所述一個或多個處理層位于每個傳感器裝置中、在所述傳感器層下方，所述一個或多個處理層被配置成從所述一個或多個第一圖像提取一個或多個對象的特征以及它們的坐標，

其中，所述控制器被配置成預測所述多個傳感器裝置中的哪個傳感器裝置具有捕獲所述一個或多個對象的同一特征的可能性。

2.根據權利要求1所述的傳感器系統，其中，所述一個或多個處理層包括模擬數字轉換(ADC)層，所述模擬數字轉換層具有用于將由所述像素的陣列捕獲的模擬強度值轉換成數字值的邏輯電路。

3.根據權利要求2所述的傳感器系統，還包括所述像素的陣列中的每個像素與所述模擬數字轉換層的所述邏輯電路之間的接口連接。

4.根據權利要求1所述的傳感器系統，其中，所述傳感器層包括非硅光電檢測器材料。

5.根據權利要求4所述的傳感器系統，其中，所述非硅光電檢測器材料選自由以下各項組成的組：量子點(QD)光電檢測器材料和有機光子膜(OPF)光電檢測器材料。

6.根據權利要求1所述的傳感器系統，其中，所述一個或多個處理層中的至少一個處理層包括被配置成部分地基于所提取的特征來確定所述一個或多個對象的深度信息的邏輯電路。

7.根據權利要求1所述的傳感器系統，其中，所述一個或多個處理層中的至少一個處理層包括卷積神經網絡(CNN)。

8.根據權利要求7所述的傳感器系統，其中，所述卷積神經網絡中的多個網絡權重被訓練用于以下各項中的至少一項：所捕獲的一個或多個第一圖像的分類；以及在所捕獲的一個或多個第一圖像中識別至少一個特征。

9.根據權利要求8所述的傳感器系統，其中，經訓練的網絡權重被應用在與所捕獲的一個或多個第一圖像中的圖像相關聯的數據上，以確定所述圖像的分類器。

10.根據權利要求7所述的傳感器系統，其中，所述卷積神經網絡包括被配置成存儲訓練后的網絡權重的憶阻器的陣列。

11.根據權利要求1所述的傳感器系統，還包括：

被定位在所述傳感器層的頂部上的光學組件，所述光學組件被配置成將經反射的光朝所述像素的陣列引導。

12.根據權利要求11所述的傳感器系統，其中，所述光學組件包括堆疊在所述傳感器層的頂部上的一個或多個晶片的層，所述光學組件的每個晶片被實施為玻璃晶片并且被配置為所述光學組件的單獨光學元件。

13.一種頭戴式顯示器HMD，包括：

傳感器系統，所述傳感器系統包括：

多個傳感器裝置；以及

控制器，所述控制器耦接到所述多個傳感器裝置；

其中，每個傳感器裝置包括：

多個堆疊層中的傳感器層，所述傳感器層包括像素的陣列，所述像素的陣列被配置成捕獲一個或多個第一圖像，以及

所述多個堆疊層中的一個或多個處理層，所述一個或多個處理層位于每個傳感器裝置中、在所述傳感器層下方，所述一個或多個處理層被配置成從所述一個或多個第一圖像提取一個或多個對象的特征以及它們的坐標，

其中，所述控制器被配置成預測所述多個傳感器裝置中的哪個傳感器裝置具有捕獲所述一個或多個對象的同一特征的可能性；以及

光學組件，所述光學組件被配置成將圖像光引導至與用戶眼睛的位置對應的眼睛框，

其中，深度信息是基于所提取的所述一個或多個對象的特征確定的。