[發明專利]多模態生物特征采集方法、裝置、可讀存儲介質及設備

在審

• 申請號: 202011543811.8
• 申請日: 2020-12-23
• 公開（公告）號: CN114743228A
• 公開（公告）日: 2022-07-12
• 發明（設計）人: 彭程
• 申請（專利權）人: 深圳愛酷智能科技有限公司;北京眼神智能科技有限公司;北京眼神科技有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V40/19;G06V40/18;G06N3/04
• 代理公司: 北京恩赫律師事務所 11469
• 代理人: 劉守憲;李善學

1.一種多模態生物特征采集方法，其特征在于，人臉鏡頭和虹膜鏡頭固定設置在可旋轉的載臺上，所述載臺上固定設置有補光燈和結構光燈，所述方法包括：

獲取所述載臺位于初始位置時由人臉鏡頭采集的人臉圖像；

控制所述載臺轉動到第一采集位置，其中，所述第一采集位置使得虹膜在所述虹膜鏡頭的視場范圍內居中；

控制補光燈和結構光燈分時互斥開啟，獲取由虹膜鏡頭分時采集的虹膜圖像和局部人臉3D結構光圖像；

控制所述載臺旋轉到至少一個第二采集位置，對每一個第二采集位置，控制補光燈和結構光燈分時互斥開啟，獲取由虹膜鏡頭分時采集的局部近紅外人臉圖像和局部人臉3D結構光圖像；

將所述虹膜圖像和所有局部近紅外人臉圖像拼接在一起得到包含完整人臉的近紅外人臉圖像，將所有局部人臉3D結構光圖像拼接在一起得到包含完整人臉的3D人臉圖像。

2.根據權利要求1所述的多模態生物特征采集方法，其特征在于，所述控制所述載臺轉動到第一采集位置，包括：

對所述人臉圖像進行人臉檢測，得到人臉圖像中人眼的第一當前位置；

計算人眼的第一當前位置與第一目標位置之間的第一差值，當所述第一差值的絕對值大于第一預設閾值時，根據所述第一差值計算得到第一角度差；

根據所述第一角度差計算載臺所需轉動的第一角度，并控制所述載臺按照所述第一角度進行轉動；

獲取由虹膜鏡頭采集的前置虹膜圖像，并對所述前置虹膜圖像進行人眼檢測，得到前置虹膜圖像中人眼的第二當前位置；

計算人眼的第二當前位置與第二目標位置之間的第二差值，當所述第二差值的絕對值大于第二預設閾值時，根據所述第二差值計算得到第二角度差；

根據所述第二角度差計算載臺所需轉動的第二角度，并控制所述載臺按照所述第二角度轉動到第一采集位置。

3.根據權利要求2所述的多模態生物特征采集方法，其特征在于，所述根據所述第一角度差計算載臺所需轉動的第一角度，之前還包括：

將第一角度差乘以系數k進行校正，k＝標準人臉大小/人臉圖像中的人臉大小。

4.根據權利要求1-3任一所述的多模態生物特征采集方法，其特征在于，所述將所述虹膜圖像和所有局部近紅外人臉圖像拼接在一起得到包含完整人臉的近紅外人臉圖像，包括：

提取所述虹膜圖像和所有局部近紅外人臉圖像的特征點，并統計所述虹膜圖像和所有局部近紅外人臉圖像的相同位置的特征點；

將所述虹膜圖像和所有局部近紅外人臉圖像的相同位置的特征點重合對齊，找到重疊區域；

以所述重疊區域為基準，將所述虹膜圖像和所有局部近紅外人臉圖像進行融合，得到所述近紅外人臉圖像。

5.根據權利要求1-3任一所述的多模態生物特征采集方法，其特征在于，所述將所述虹膜圖像和所有局部近紅外人臉圖像拼接在一起得到包含完整人臉的近紅外人臉圖像，包括：

提取所述人臉圖像、虹膜圖像和所有局部近紅外人臉圖像的特征點；

以人臉圖像的特征點為基準，將虹膜圖像和所有局部近紅外人臉圖像的特征點與相同位置的人臉圖像的特征點重合對齊；

將對齊后的虹膜圖像和所有局部近紅外人臉圖像融合在一起，得到所述近紅外人臉圖像。

6.一種多模態生物特征采集裝置，其特征在于，人臉鏡頭和虹膜鏡頭固定設置在可旋轉的載臺上，所述載臺上固定設置有補光燈和結構光燈，所述裝置包括：

第一獲取模塊，用于獲取所述載臺位于初始位置時由人臉鏡頭采集的人臉圖像；

旋轉模塊，用于控制所述載臺轉動到第一采集位置，其中，所述第一采集位置使得虹膜在所述虹膜鏡頭的視場范圍內居中；

第二獲取模塊，用于控制補光燈和結構光燈分時互斥開啟，獲取由虹膜鏡頭分時采集的虹膜圖像和局部人臉3D結構光圖像；

第三獲取模塊，用于控制所述載臺旋轉到至少一個第二采集位置，對每一個第二采集位置，控制補光燈和結構光燈分時互斥開啟，獲取由虹膜鏡頭分時采集的局部近紅外人臉圖像和局部人臉3D結構光圖像；

拼接模塊，用于將所述虹膜圖像和所有局部近紅外人臉圖像拼接在一起得到包含完整人臉的近紅外人臉圖像，將所有局部人臉3D結構光圖像拼接在一起得到包含完整人臉的3D人臉圖像。