[發明專利]基于聲音輔助定位的人臉追蹤方法、終端及存儲裝置

有效

• 申請號: 202010172789.4
• 申請日: 2020-03-12
• 公開（公告）號: CN111432115B
• 公開（公告）日: 2021-12-10
• 發明（設計）人: 陳明珠;項宇寧;楊增啟;徐金華
• 申請（專利權）人: 浙江大華技術股份有限公司
• 主分類號: H04N5/232
• 分類號: H04N5/232
• 代理公司: 深圳市威世博知識產權代理事務所(普通合伙) 44280
• 代理人: 黎堅怡

1.一種基于聲音輔助定位的人臉追蹤方法，其特征在于，包括：

獲取攝像頭拍攝的場景的圖像；

判斷所述圖像中是否存在目標對象的人臉；

當所述圖像中不存在目標對象的人臉時，通過聲音采集裝置采集所述場景中的所有聲音；

確認是否存在與所述目標對象對應的目標聲音特征；

當存在與所述目標對象對應的目標聲音特征時，基于所述目標聲音特征計算得到所述目標對象的空間位置，再控制所述攝像頭對準所述空間位置以追蹤所述目標對象的人臉；

所述聲音采集裝置包括至少四個聲音接收裝置，且所述至少四個聲音接收裝置分設于不同位置且處于不同平面；

所述基于所述目標聲音特征計算得到所述目標對象的空間位置，再控制所述攝像頭對準所述空間位置以追蹤所述目標對象的人臉的步驟，包括：

獲取所述至少四個聲音接收裝置接收到所述目標對象的聲音的時間差；

利用所述聲音接收裝置相對于所述攝像頭的坐標位置、以及所述時間差計算所述目標對象相對于所述攝像頭的相對坐標；

基于所述相對坐標控制所述攝像頭移動以聚焦所述相對坐標；

所述基于所述相對坐標控制所述攝像頭移動以聚焦所述相對坐標的步驟之后，還包括：

判斷所述時間差是否發生了變化；

若是，則計算得到在不同時間的相對坐標，再通過所述不同時間的相對坐標計算得到所述目標對象的移動速度和方向，再基于所述移動速度和方向控制所述攝像頭移動以追蹤所述目標對象的人臉。

2.根據權利要求1所述的方法，其特征在于，

所述方法還包括：

預先在不同場景采集所述目標對象的不同音量大小的聲音；

過濾所述聲音中的雜音和靜音部分，并提取過濾后的聲音的聲音特征通過神經網絡進行學習訓練，得到目標對象的聲音特征；

將所述目標對象的聲音特征存儲至數據庫。

3.根據權利要求2所述的方法，其特征在于，

所述確認是否存在與所述目標對象對應的目標聲音特征的步驟，包括：

從所述場景中提取每一個聲音的聲音特征；

將每一個所述聲音特征與所述數據庫中存儲的所述目標對象的聲音特征進行匹配，以確認是否存在與所述目標對象對應的目標聲音特征。

4.根據權利要求1所述的方法，其特征在于，

所述判斷所述圖像中是否存在目標對象的人臉的步驟之后，還包括：

當所述圖像中存在目標對象的人臉時，檢測所述目標對象的人臉是否移動；

若是，則當目標對象的人臉仍在所述圖像中時，控制所述攝像頭移動以追蹤所述目標對象的人臉；

若否，則控制攝像頭聚焦所述目標對象的人臉。

5.根據權利要求4所述的方法，其特征在于，

所述控制所述攝像頭移動以追蹤所述目標對象的人臉的步驟，包括：

獲取所述目標對象在相鄰幀圖像中的像素位差；

比對不同幀圖像中目標對象的像素位差以計算目標對象的移動速度和方向；

基于所述移動速度和方向控制所述攝像頭移動，以追蹤所述目標對象的人臉。

6.根據權利要求5所述的方法，其特征在于，

所述基于所述移動速度和方向控制所述攝像頭移動，以追蹤所述目標對象的人臉的步驟，包括；

基于所述移動速度計算所述攝像頭運動速度；

判斷所述運動速度是否超過預設最大速度；

若是，則控制所述攝像頭按所述預設最大速度和方向移動；

若否，則控制所述攝像頭按所述運動速度和方向移動。

7.一種終端，其特征在于，所述終端包括處理器、與所述處理器耦接的存儲器、攝像頭以及聲音采集裝置，其中，

所述存儲器存儲有用于實現如權利要求1-6中任一項所述的基于聲音輔助定位的人臉追蹤方法的程序指令；

所述處理器用于執行所述存儲器存儲的所述程序指令以追蹤目標對象的人臉；

所述攝像頭用于獲取場景中的圖像；

所述聲音采集裝置用于采集場景中的所有聲音。

8.一種存儲裝置，其特征在于，存儲有能夠實現如權利要求1-6中任一項所述的基于聲音輔助定位的人臉追蹤方法的程序文件。