[發(fā)明專利]一種通過面部要素觸發(fā)情景控制的方法與系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202110398268.5
• 申請日: 2021-04-14
• 公開（公告）號: CN113283293A
• 公開（公告）日: 2021-08-20
• 發(fā)明（設計）人: 江小青
• 申請（專利權）人: 杭州鴻雁電器有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G10L25/03;G10L25/57
• 代理公司: 暫無信息
• 代理人: 暫無信息

在一種通過面部要素觸發(fā)情景控制的方法及其系統(tǒng)中，方法包括在智能家居設施處生成對應進場人員的虛擬身份，在虛擬身份中生成對該人員的第一要素處理內容，在讀取該第一要素處理內容時檢測虛擬子身份的輸入，響應虛擬子身份輸入在拍攝期間經攝像頭感測與人員面部要素關聯(lián)的視頻信息，并經語音設備獲取該人員音頻信號以從所獲音頻信號中提取音頻特性信息，從同步視頻信號中提取與面部要素特征關聯(lián)的面部要素特性信息，基于面部要素特性信息和音頻特性信息生成音頻特征信號，生成第二要素處理內容以檢測與確定對情景模式的觸發(fā)，本發(fā)明系統(tǒng)用于實現(xiàn)上述方法。

技術領域

本發(fā)明主要是關于使用用戶面部要素觸發(fā)家居情景控制的方法及其實現(xiàn)系統(tǒng)。

背景技術

目前家居、社區(qū)環(huán)境的智能化應用已經越來越普遍，而伴隨著智能化應用的深入，家居設備開始具有圖像識別功能，例如可以對注冊用戶的面部要素進行圖形拍攝、錄像以進行圖形分析確定當前用戶身份，或者是可以識別視野內人體或動物的移動等等。然而，目前在家居設備安防領域，期望于更便利地利用用戶的面部要素來識別和觸發(fā)對聯(lián)網的家居設備的控制，以增強用戶交互使用體驗。

發(fā)明內容

本發(fā)明旨在解決目前這種功能需求，設計一種通過面部要素觸發(fā)情景控制的方法，主要包括：在至少具有攝像頭和/或語音設備的智能家居設施處，生成對應于每一進場人員的虛擬身份，在所述虛擬身份中生成對該人員的第一要素處理內容；在讀取對應于所述虛擬身份的第一要素處理內容時，檢測在所述虛擬身份中的虛擬子身份的輸入；響應所檢測到虛擬身份中的所述虛擬子身份輸入，在拍攝期間經所述攝像頭感測獲取與所述人員的面部要素關聯(lián)的視頻信息，并經所述語音設備獲取該人員音頻信號以從所獲音頻信號中提取音頻特性信息；以及從所獲的同步視頻信號中提取與面部要素特征關聯(lián)的面部要素特性信息，并響應檢測到所述拍攝操作結束后，至少部分地基于所述面部要素特性信息和音頻特性信息，生成音頻特征信號，根據(jù)該面部要素特性信息在所述虛擬身份中生成第二要素處理內容以檢測與確定對情景模式的觸發(fā)。

具體來說，如果在同一場景中的一個攝像頭已拍攝了未經濾噪處理的進場人員的面部圖像，而另一個攝像頭也同樣地拍攝到了該人員的頭像，則該人員的面部要素被選擇更新為具有更佳效果的拍攝圖像，或者這兩個攝像頭各自拍攝到的視頻被剪輯成判斷為連續(xù)的圖像，而采用新選擇的頭像照片作為虛擬身份的處理源。

作為一種變型，所述的方法還包括存儲與從所述視頻信號中提取的所述面部要素特性信息相關聯(lián)的面部要素特征的元數(shù)據(jù)和與從所述音頻信號中提取的所述音頻特性信息相關聯(lián)的音頻元數(shù)據(jù)。

作為另一種變型，所述的方法還包括根據(jù)確定所述音頻信號的所述特性提取部分對應于所述面部要素，存儲所述音頻信號的所述部分以用于生成所述經調整的音頻信號。

在此基礎上，所述的方法還包括根據(jù)確定所述音頻信號的所述部分不對應于所述面部要素，至少移除所述音頻信號的所述部分，其中所述音頻特性信息包括與所述感測視場中的所述面部要素相關聯(lián)的語音的特征。

進一步地，所述的方法還可包括至少部分地基于所述面部要素特性信息和所述音頻特性信息來生成經調整的面部要素元數(shù)據(jù)。

作為又一種變型嗎，所述的方法還包括根據(jù)所述經調整的面部要素元數(shù)據(jù)和所述經調整的音頻信號來生成所述虛擬頭像的所述第二要素處理內容。

在以上各個變型中，在對上述面部要素的處理進程中，通過所述攝像頭檢測該人員是否在移動，從而預觸發(fā)鄰近可用的門鎖執(zhí)行其機械和/或電子動作，或者同步錄制和解析當前人員說出的語言內容來確定其接下來期望的行走動作。

本發(fā)明在以上基礎上還設計一種通過面部要素觸發(fā)情景控制的系統(tǒng)，包括用于實現(xiàn)上述方法的圖形處理器。

附圖說明

圖1是實現(xiàn)本發(fā)明方法的邏輯原理框圖；

圖2是本發(fā)明實現(xiàn)方法的應用情景示意圖。

具體實施方式