[發明專利]基于移動云臺的三維人臉跟蹤及表情識別系統

在審

• 申請號: 201611267241.8
• 申請日: 2016-12-31
• 公開（公告）號: CN108268825A
• 公開（公告）日: 2018-07-10
• 發明（設計）人: 鐘鴻飛;覃爭鳴;楊旭
• 申請（專利權）人: 廣州映博智能科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G05D3/12
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于移動云臺的三維人臉跟蹤及表情識別系統，其特征在于，系統包括：數據采集模塊、電機伺服控制系統和軟件功能模塊，其中：

所述數據采集模塊包括兩個攝像頭、圖像采集卡；所述攝像頭連接于圖像采集卡，用于捕獲行人視頻；所述圖像采集卡用于發送指令至攝像頭，用于開啟、關閉攝像頭以及設置攝像頭參數，并將捕獲視頻傳輸至軟件功能模塊；

所述電機伺服控制系統包括兩個二自由度的舵機云臺、步進電機、運動控制卡；所述舵機云臺連接于步進電機，用于實現攝像頭的旋轉；所述攝像頭位于舵機云臺上；所述步進電機連接于運動控制卡，所述運動控制卡連接于軟件功能模塊，用于控制步進電機動作從而實現云臺運動；

所述軟件功能模塊包括圖像預處理模塊、人臉檢測模塊、人臉跟蹤模塊、表情識別模塊、云臺控制模塊；所述圖像預處理模塊接收來自數據采集模塊的視頻數據，經過處理后發送至人臉檢測模塊；所述人臉檢測模塊使用注意力選擇算法快速檢測人臉，并將人臉區域發送至人臉跟蹤模塊和表情識別模塊；所述表情識別模塊使用分類器對人臉區域的表情特征進行分類，得到表情類別；所述人臉跟蹤模塊使用特征匹配方法計算左右攝像頭圖像的視差，計算出人臉的三維坐標，將人臉區域始終定位到左圖像的中心，從而計算得到云臺需要轉動的角度，實現人臉區域的跟蹤。

2.根據權利要求1所述的一種基于移動云臺的三維人臉跟蹤及表情識別系統，其特征在于，所述左側攝像頭位于左側舵機云臺上，右側攝像頭位于右側舵機云臺上。

3.根據權利要求1所述的一種基于移動云臺的三維人臉跟蹤及表情識別系統，所述所述圖像預處理模塊包括：圖像灰度化、圖像均衡化、圖像二值化操作。

4.根據權利要求1所述的一種基于移動云臺的三維人臉跟蹤及表情識別系統，其特征在于，所述人臉跟蹤模塊，使用SIFT特征計算左右攝像頭圖像的視差。