[發明專利]交互式智能家庭服務系統及方法

有效

• 申請號: 201710367540.7
• 申請日: 2017-05-23
• 公開（公告）號: CN107065586B
• 公開（公告）日: 2020-02-07
• 發明（設計）人: 黃凱奇;康運鋒;謝元濤;張世渝;姜宇
• 申請（專利權）人: 中國科學院自動化研究所
• 主分類號: G05B15/02
• 分類號: G05B15/02;G05B19/418
• 代理公司: 11482 北京瀚仁知識產權代理事務所(普通合伙)
• 代理人: 郭文浩;王世超

1.一種交互式智能家庭服務系統，其特征在于，所述交互式智能家庭服務系統包括：視頻監控單元，用于實時自動獲取門前或者室內的人員的面部圖像、和/或室內物體的圖像；語音單元，用于采集室內人員的語音指令和/或發出語音提醒信息；交互終端，與所述語音單元連接，用于推送語音提醒指令到所述語音單元中，使所述語音單元發出對應所述語音提醒指令的語音提醒信息；或者接收所述語音單元采集的語音指令，并將對應指令發送給分析服務器進行對應處理；分析服務器，分別與所述視頻監控單元和交互終端連接，用于進行語音交互和視覺感知交互；在進行視覺感知交互時，根據所述門前或者室內的人員的面部圖像，進行人臉驗證，自動切換模式類別；對室內人體和物體進行智能視頻分析，自動生成不同應用場景下的語音提醒指令；在進行語音交互時，根據智能視頻分析自動挖掘用戶需求，生成相應的語音提醒指令，并通過所述交互終端推送到所述語音單元，或者根據所述交互終端推送的語音指令，進行人臉驗證，自動切換模式類別，并生成對應的語音提醒指令；其中，所述模式類別包括安全模式和服務模式；

所述服務模式包括定時提醒、訪客提醒、智能尋物、喝水提醒及久坐提醒中至少一項；所述安全模式包括身份認證、入侵提醒、財務守護、異常回放及自我診斷中至少一項。

2.根據權利要求1所述的交互式智能家庭服務系統，其特征在于，所述交互式智能家庭服務系統還包括：傳感器單元，所述傳感器單元與所述分析服務器連接，用于實時檢測與房屋相關的狀態信息，并將所述狀態信息發送至所述分析服務器，以輔助視頻監控單元的智能視頻分析，對用戶需求進行精準分析。

3.根據權利要求2所述的交互式智能家庭服務系統，其特征在于，傳感器單元包括設置于房屋各門窗入口處的門磁傳感器、設置于室內且用于檢測室內人員的人體傳感器、用于檢測煙霧的煙霧傳感器、用于檢測室內氣候環境的溫濕度傳感器以及與家庭內的物件綁定的尋物傳感器中至少一項。

4.根據權利要求3所述的交互式智能家庭服務系統，其特征在于，所述尋物傳感器連接有語音報警器，用于當用戶發出尋找指令以尋找指定物品時，所述語音單元通過交互終端將尋找指令發送至所述分析服務器，所述分析服務器與對應的尋物傳感器通信，使與所述尋物傳感器連接的語音報警器發出報警信號，以提醒用戶。

5.根據權利要求2所述的交互式智能家庭服務系統，其特征在于，所述交互式智能家庭服務系統還包括：智能網關，所述傳感器單元通過ZigBee協議接入所述智能網關；路由器，所述智能網關和分析服務器全部連入所述路由器建立的無線局域網，所述分析服務器通過無線網分別與交互終端、視頻監控單元和智能網關相連，所述分析服務器通過HTTP協議對所述傳感器單元進行通信和控制。

6.根據權利要求1所述的交互式智能家庭服務系統，其特征在于，所述分析服務器還用于當初次使用時，主動進行用戶人臉注冊，并設置用戶的使用權限。

7.根據權利要求6所述的交互式智能家庭服務系統，其特征在于，所述分析服務器還用于在自動對視頻監控單元采集到的人臉進行身份認證時，確認所述門前或者室內的人員的身份，并根據所述人員的身份開啟或關閉對應的使用權限。

8.根據權利要求1-7中任一項所述的交互式智能家庭服務系統，其特征在于，所述交互式智能家庭服務系統還包括移動終端，用于通過移動終端對室內物體進行拍照和標簽，將所拍照的物體圖像樣本傳輸到云端，自動更新所述分析服務器中存儲的目標檢測模型。

9.一種交互式智能家庭服務方法，其特征在于，所述交互式智能家庭服務方法包括：通過視頻監控單元實時自動獲取門前或者室內的人員的面部圖像、和/或室內物體的圖像；通過語音單元采集室內人員的語音指令和/或發出語音提醒信息；通過分析服務器進行語音交互和視覺感知交互，在進行視覺感知交互時，根據所述門前或者室內的人員的面部圖像，進行人臉驗證，自動切換模式類別；對室內人體和物體進行智能視頻分析，自動生成不同應用場景下的語音提醒指令；在進行語音交互時，根據智能視頻分析自動挖掘用戶需求，生成相應的語音提醒指令，并通過交互終端將所述語音提醒指令推送到語音單元中，使所述語音單元發出對應所述語音提醒指令的語音提醒信息；或者根據所述交互終端推送的語音指令，進行人臉驗證，切換模式類別，并生成對應的語音提醒指令；其中，所述模式類別包括安全模式和服務模式；

所述服務模式包括定時提醒、訪客提醒、智能尋物、喝水提醒及久坐提醒中至少一項；所述安全模式包括身份認證、入侵提醒、財務守護、異常回放及自我診斷中至少一項。