[發(fā)明專利]基于異常聲音和圖像事件驅(qū)動的智能服務(wù)機(jī)器人及方法

有效

• 申請?zhí)枺?/td>: 201710009246.9
• 申請日: 2017-01-06
• 公開（公告）號: CN106826846B
• 公開（公告）日: 2020-02-14
• 發(fā)明（設(shè)計）人: 劉永;童彬祥;曹幫二
• 申請（專利權(quán)）人: 南京赫曼機(jī)器人自動化有限公司
• 主分類號: B25J11/00
• 分類號: B25J11/00;H04N7/18;H04L29/08
• 代理公司: 32203 南京理工大學(xué)專利中心
• 代理人: 唐代盛

本發(fā)明公開了一種基于異常聲音和圖像事件驅(qū)動的智能服務(wù)機(jī)器人及處理方法，包括移動機(jī)器人單元、聲音和圖像傳感器、聲音和圖像事件控制單元以及遠(yuǎn)程客戶端，聲音和圖像傳感器設(shè)置在移動機(jī)器人單元上，并通過接口與聲音和圖像事件控制單元相連，聲音和圖像事件控制單元安裝在移動機(jī)器人單元上并通過接口與移動機(jī)器人單元連接，聲音和圖像事件控制單元通過網(wǎng)絡(luò)與遠(yuǎn)程客戶端通信，當(dāng)智能服務(wù)機(jī)器人聽到或者看到有異常的事件時，則導(dǎo)航到事件發(fā)生的地點(diǎn)，融合聲音和圖像進(jìn)一步識別該事件并根據(jù)識別結(jié)果做相應(yīng)處理。本發(fā)明避免了攝像頭一直拍攝人員特別是家庭環(huán)境所造成的隱私泄露以及不舒服感；大大降低了功耗，提高了效率。

技術(shù)領(lǐng)域

本發(fā)明屬于智能安保服務(wù)機(jī)器人技術(shù)領(lǐng)域，特別是一種基于異常聲音和圖像事件驅(qū)動的智能服務(wù)機(jī)器人及處理方法。

背景技術(shù)

在家庭以及公共安全等領(lǐng)域，對于信息監(jiān)控等安保裝備有著迫切的需求，傳統(tǒng)的解決方法是在家庭以及公共場所架設(shè)攝像頭等監(jiān)控系統(tǒng)，這需要預(yù)先鋪設(shè)管線，費(fèi)時費(fèi)力。

智能服務(wù)機(jī)器人包括智能安保服務(wù)機(jī)器人具有更好的靈活性、智能性得到了廣泛的關(guān)注和應(yīng)用，但是對于異常事件的檢測一般通過攝像頭遠(yuǎn)程監(jiān)控來實(shí)現(xiàn)，這會導(dǎo)致攝像頭一直處于開啟狀態(tài)，造成人員的隱私泄露

智能服務(wù)機(jī)器人在對異常檢測時已有了一定方法研究，但是都是基于異常事件的單一特征進(jìn)行分析的，這種檢測方法一般都有局限性，自主分析能力低。專利201110444850.7公開了一種公共場所異常聲音的識別與定位方法用于公共場所異常聲音識別及定位方法，也只是在音頻信號方面進(jìn)行處理。

發(fā)明內(nèi)容

本發(fā)明的目的在于提供一種解決家庭以及公共安全等領(lǐng)域的基于異常聲音和圖像事件驅(qū)動的智能服務(wù)機(jī)器人及處理方法。

實(shí)現(xiàn)本發(fā)明目的的技術(shù)解決方案為：一種基于異常聲音和圖像事件驅(qū)動的智能服務(wù)機(jī)器人，包括移動機(jī)器人單元、聲音和圖像傳感器、聲音和圖像事件控制單元以及遠(yuǎn)程客戶端，聲音和圖像傳感器設(shè)置在移動機(jī)器人單元上，并通過接口與聲音和圖像事件控制單元相連，聲音和圖像事件控制單元安裝在移動機(jī)器人單元上并通過接口與移動機(jī)器人單元連接，聲音和圖像事件控制單元通過網(wǎng)絡(luò)與遠(yuǎn)程客戶端通信。

一種基于異常聲音和圖像事件驅(qū)動的智能服務(wù)機(jī)器人的處理方法，在正常情況下，智能服務(wù)機(jī)器人停在原處或者在指定區(qū)域移動，當(dāng)聽到或者看到有異常的事件時，則導(dǎo)航到事件發(fā)生的地點(diǎn)，融合聲音和圖像進(jìn)一步識別該事件并根據(jù)識別結(jié)果做相應(yīng)處理。

本發(fā)明與現(xiàn)有技術(shù)相比，其顯著優(yōu)點(diǎn)：(1)本發(fā)明在正常情況下機(jī)器人在原地或者指定區(qū)域移動，避免了攝像頭一直拍攝人員特別是家庭環(huán)境所造成的隱私泄露以及不舒服感。(2)本發(fā)明在正常情況下機(jī)器人在原地或者指定區(qū)域移動，大大降低了功耗，提高了效率。(3)本發(fā)明對異常情況的監(jiān)測，分別在聽覺和視覺方面進(jìn)行分析，然后進(jìn)行多模態(tài)的生物特征融合處理，解決了單信息分析問題的不足。

下面結(jié)合附圖對本發(fā)明作進(jìn)一步詳細(xì)描述。

附圖說明

圖1是本發(fā)明基于異常聲音和圖像事件驅(qū)動的智能服務(wù)機(jī)器人組成示意圖。

圖2是本發(fā)明基于異常聲音和圖像事件驅(qū)動的智能服務(wù)機(jī)器人的工作流程。

圖3是本發(fā)明異常事件的識別、定位以及導(dǎo)航流程圖。

圖4是本發(fā)明聲音和圖像融合識別事件的流程圖。

具體實(shí)施方式