[發(fā)明專利]使用TOF傳感器的動(dòng)作識(shí)別設(shè)備及其操作方法

在審

• 申請(qǐng)?zhí)枺?/td>: 202110556955.5
• 申請(qǐng)日: 2021-05-21
• 公開（公告）號(hào): CN114035717A
• 公開（公告）日: 2022-02-11
• 發(fā)明（設(shè)計(jì)）人: 張?jiān)诤?/a>
• 申請(qǐng)（專利權(quán)）人: 愛思開海力士有限公司
• 主分類號(hào): G06F3/04812
• 分類號(hào): G06F3/04812;G06F3/04883
• 代理公司: 北京三友知識(shí)產(chǎn)權(quán)代理有限公司 11127
• 代理人: 劉久亮;黃綸偉

1.一種用于識(shí)別對(duì)象的動(dòng)作或姿態(tài)的方法，該方法包括以下步驟：

操作光學(xué)傳感器裝置以捕獲在朝向所述對(duì)象發(fā)射的光的照射下從所述對(duì)象反射的光；

通過將所發(fā)射的光與所反射的光進(jìn)行比較來生成深度圖像，該深度圖像包括指示所述光學(xué)傳感器裝置與所述對(duì)象之間的距離的距離信息；

基于從所述對(duì)象反射的光來生成紅外圖像，該紅外圖像包括與所述對(duì)象相關(guān)聯(lián)的紅外圖像信息；以及

基于所述深度圖像和所述紅外圖像中的至少一個(gè)來確定所述對(duì)象的動(dòng)作。

2.根據(jù)權(quán)利要求1所述的方法，

其中，所述深度圖像包括第一深度圖像和第二深度圖像，并且

其中，生成所述深度圖像的步驟包括以下步驟：

通過根據(jù)第一操作模式操作捕獲從所述對(duì)象反射的光的圖像傳感器像素來生成所述第一深度圖像；以及

在所述第一深度圖像滿足與所述對(duì)象的身份的識(shí)別相關(guān)聯(lián)的第一模式轉(zhuǎn)換條件的情況下，通過根據(jù)第二操作模式操作所述圖像傳感器像素，來生成所述第二深度圖像。

3.根據(jù)權(quán)利要求2所述的方法，其中，生成所述紅外圖像的步驟包括以下步驟：

在所述第二深度圖像滿足與所述對(duì)象的特定部位的識(shí)別相關(guān)聯(lián)的第二模式轉(zhuǎn)換條件的情況下，通過根據(jù)第三操作模式驅(qū)動(dòng)所述像素來產(chǎn)生所述紅外圖像。

4.根據(jù)權(quán)利要求3所述的方法，其中，所述圖像傳感器像素包括電流輔助光子解調(diào)器CAPD像素，所述CAPD像素被構(gòu)造為在基板中產(chǎn)生空穴電流并捕獲由入射光產(chǎn)生并通過所述空穴電流移動(dòng)的光電荷。

5.根據(jù)權(quán)利要求3所述的方法，其中，每個(gè)所述圖像傳感器像素包括第一控制節(jié)點(diǎn)和第二控制節(jié)點(diǎn)，所述第一控制節(jié)點(diǎn)和所述第二控制節(jié)點(diǎn)被構(gòu)造為通過分別接收第一解調(diào)控制信號(hào)和第二解調(diào)控制信號(hào)來產(chǎn)生空穴電流。

6.根據(jù)權(quán)利要求5所述的方法，其中，在所述第一操作模式下，所述第一解調(diào)控制信號(hào)和所述第二解調(diào)控制信號(hào)中的每一個(gè)依據(jù)第一解調(diào)頻率而交替地具有激活電壓電平和非激活電壓電平。

7.根據(jù)權(quán)利要求6所述的方法，

其中，在所述第二操作模式下，所述第一解調(diào)控制信號(hào)和所述第二解調(diào)控制信號(hào)中的每一個(gè)依據(jù)第二解調(diào)頻率而交替地具有激活電壓電平和非激活電壓電平，

其中，所述第二解調(diào)頻率高于所述第一解調(diào)頻率。

8.根據(jù)權(quán)利要求5所述的方法，其中，在所述第三操作模式下，所述第一解調(diào)控制信號(hào)和所述第二解調(diào)控制信號(hào)中的一個(gè)具有非激活電壓電平，并且所述第一解調(diào)控制信號(hào)和所述第二解調(diào)控制信號(hào)中的另一個(gè)交替地具有激活電壓電平和非激活電壓電平。

9.根據(jù)權(quán)利要求2所述的方法，其中，所述第一模式轉(zhuǎn)換條件包括在所述第一深度圖像中位于第一距離范圍內(nèi)的第一對(duì)象是否被識(shí)別為人的形狀。

10.根據(jù)權(quán)利要求9所述的方法，該方法還包括以下步驟：

當(dāng)所述第一深度圖像滿足所述第一模式轉(zhuǎn)換條件時(shí)，使與除了其中包括所述第一對(duì)象的圖像拾取區(qū)域之外的背景區(qū)域相對(duì)應(yīng)的圖像傳感器像素去激活。

11.根據(jù)權(quán)利要求3所述的方法，其中，所述第二模式轉(zhuǎn)換條件包括在所述第二深度圖像中位于第二距離范圍內(nèi)的第二對(duì)象是否被識(shí)別為特定身體部位。

12.根據(jù)權(quán)利要求1所述的方法，該方法還包括以下步驟：

基于所述紅外圖像識(shí)別動(dòng)作，

其中，基于所述紅外圖像識(shí)別動(dòng)作的步驟包括以下步驟：

識(shí)別所述紅外圖像中所包括的第三對(duì)象；以及

通過使用基于卷積神經(jīng)網(wǎng)絡(luò)的深度學(xué)習(xí)算法確定第三對(duì)象是否被識(shí)別為預(yù)定的用戶輸入。

13.根據(jù)權(quán)利要求12所述的方法，該方法還包括以下步驟：

執(zhí)行所識(shí)別的用戶輸入所針對(duì)的操作。