[發(fā)明專利]一種同步獲取深度、彩色與光譜圖像的裝置及識別系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202011552870.1
• 申請日: 2020-12-24
• 公開（公告）號: CN112802068A
• 公開（公告）日: 2021-05-14
• 發(fā)明（設(shè)計）人: 師少光;黃澤鋏;張丁軍;江隆業(yè);黃源浩;肖振中
• 申請（專利權(quán)）人: 奧比中光科技集團(tuán)股份有限公司
• 主分類號: G06T7/32
• 分類號: G06T7/32;G06T7/80;G06T7/90;G06K9/00;G06F17/16
• 代理公司: 深圳漢世知識產(chǎn)權(quán)代理事務(wù)所(特殊普通合伙) 44578
• 代理人: 田志立

本發(fā)明公開了一種同步獲取深度、彩色與光譜圖像的裝置及識別系統(tǒng)，包括深度相機模塊、RGB相機模塊、光譜相機模塊以及控制處理模塊；其中，深度相機模塊用于獲取目標(biāo)區(qū)域的深度圖像數(shù)據(jù)；RGB相機模塊用于獲取目標(biāo)區(qū)域的彩色圖像數(shù)據(jù)；光譜相機模塊用于獲取目標(biāo)區(qū)域的光譜圖像數(shù)據(jù)；控制處理模塊用于同步控制深度相機模塊、RGB相機模塊與光譜相機模塊的數(shù)據(jù)采集，并對所采集到的深度圖像數(shù)據(jù)、彩色圖像數(shù)據(jù)和光譜圖像數(shù)據(jù)進(jìn)行處理，輸出配準(zhǔn)對齊的深度圖像數(shù)據(jù)、彩色圖像數(shù)據(jù)和光譜圖像數(shù)據(jù)。本發(fā)明通過增加光譜信息，提供了深度信息、彩色信息和光譜信息的組合，從而提升了應(yīng)用的安全性，且可擴展數(shù)據(jù)的應(yīng)用場景。

技術(shù)領(lǐng)域

本發(fā)明涉及圖像處理技術(shù)領(lǐng)域，尤其涉及一種同步獲取深度、彩色與光譜圖像的裝置及識別系統(tǒng)。

背景技術(shù)

深度數(shù)據(jù)信息已成為人工智能技術(shù)當(dāng)中的一項關(guān)鍵數(shù)據(jù)，通過獲取目標(biāo)的深度信息可以實現(xiàn)諸多的應(yīng)用，如：測距、三維建模、以及實現(xiàn)人機交互等等。隨著人工智能相關(guān)技術(shù)的發(fā)展應(yīng)用，僅靠深度信息已難以滿足眾多應(yīng)用的需求，所以出現(xiàn)了深度信息與彩色信息兩者的結(jié)合，通過深度信息與彩色信息的結(jié)合，可以豐富深度相機的更多應(yīng)用。然而，在一些應(yīng)用領(lǐng)域，如：在刷臉支付、身份認(rèn)證等高安全性需求的應(yīng)用場景中，僅依靠深度信息與色彩信息無法判斷目標(biāo)物體的物質(zhì)屬性，存在被假體攻破的風(fēng)險，所以若能結(jié)合光譜信息，則可大大提高識別的安全性。

目前，一般利用基于結(jié)構(gòu)光方案或者TOF技術(shù)方案的深度相機獲取目標(biāo)的深度信息，利用RGB相機獲取目標(biāo)的色彩信息，而利用高光譜相機獲取光譜信息，深度相機、RGB相機和高光譜相機三者之間獨立獲取數(shù)據(jù)信息，難以結(jié)合于一起應(yīng)用。雖然光譜激光雷達(dá)能夠同步獲取目標(biāo)物體的深度和光譜信息，如：根據(jù)飛行時間法確定目標(biāo)物體的深度信息，同時對接收的反射信號進(jìn)行光譜分光后獲得各個波段的光譜信息。然而，光譜激光雷達(dá)體積過大，價格昂貴，分辨率低，無法做成消費級的產(chǎn)品。

上述背景技術(shù)內(nèi)容的公開僅用于輔助理解本發(fā)明的發(fā)明構(gòu)思及技術(shù)方案，其并不必然屬于本專利申請的現(xiàn)有技術(shù)，在沒有明確的證據(jù)表明上述內(nèi)容在本專利申請的申請日已經(jīng)公開的情況下，上述背景技術(shù)不應(yīng)當(dāng)用于評價本申請的新穎性和創(chuàng)造性。

發(fā)明內(nèi)容

本發(fā)明的目的在于提供一種同步獲取深度、彩色與光譜圖像的裝置及識別系統(tǒng)，以解決上述背景技術(shù)問題中的至少一種問題。

為達(dá)到上述目的，本發(fā)明實施例的技術(shù)方案是這樣實現(xiàn)的：

一種同步獲取深度、彩色與光譜圖像的裝置，包括深度相機模塊、RGB相機模塊、光譜相機模塊以及控制處理模塊；其中，

所述深度相機模塊用于獲取目標(biāo)區(qū)域的深度圖像數(shù)據(jù)；

所述RGB相機模塊用于獲取目標(biāo)區(qū)域的彩色圖像數(shù)據(jù)；

所述光譜相機模塊用于獲取目標(biāo)區(qū)域的光譜圖像數(shù)據(jù)；

所述控制處理模塊用于同步控制所述深度相機模塊、所述RGB相機模塊與所述光譜相機模塊的數(shù)據(jù)采集，并對所采集到的所述深度圖像數(shù)據(jù)、所述彩色圖像數(shù)據(jù)和所述光譜圖像數(shù)據(jù)進(jìn)行處理，輸出配準(zhǔn)對齊的深度圖像數(shù)據(jù)、彩色圖像數(shù)據(jù)和光譜圖像數(shù)據(jù)。

在一些實施例中，所述控制處理模塊用于對所述深度圖像數(shù)據(jù)與所述彩色圖像數(shù)據(jù)進(jìn)行配準(zhǔn)。

在一些實施例中，所述控制處理模塊還用于對所述彩色圖像數(shù)據(jù)與所述光譜圖像數(shù)據(jù)進(jìn)行配準(zhǔn)。

在一些實施例中，所述控制處理模塊被配置為根據(jù)所述深度圖像數(shù)據(jù)與所述彩色圖像數(shù)據(jù)的配準(zhǔn)，以及所述彩色圖像數(shù)據(jù)與所述光譜圖像數(shù)據(jù)的配準(zhǔn)，利用所述彩色圖像數(shù)據(jù)建立所述深度圖像數(shù)據(jù)與所述光譜圖像數(shù)據(jù)的關(guān)系，對所述深度圖像數(shù)據(jù)與所述光譜圖像數(shù)據(jù)進(jìn)行配準(zhǔn)。

在一些實施例中，所述深度相機模塊為具有RGB相機模組的結(jié)構(gòu)光深度相機。