[發(fā)明專利]聲音引導系統(tǒng)以及聲音引導方法

有效

• 申請?zhí)枺?/td>: 202010070053.6
• 申請日: 2020-01-21
• 公開（公告）號: CN111687831B
• 公開（公告）日: 2023-01-03
• 發(fā)明（設計）人: 大竹晉資;大原辰德
• 申請（專利權）人: 株式會社日立大廈系統(tǒng);株式會社日立制作所
• 主分類號: B25J9/16
• 分類號: B25J9/16;B25J11/00;B25J13/00;B25J19/02
• 代理公司: 北京銀龍知識產(chǎn)權代理有限公司 11243
• 代理人: 曾賢偉;范勝杰

1.一種聲音引導系統(tǒng)，其具備照相機、麥克風、揚聲器，從所述揚聲器輸出基于輸入到所述麥克風的聲音的引導用的聲音，其特征在于，

所述聲音引導系統(tǒng)具備：

提問接受部，其接受基于輸入到所述麥克風的聲音的提問；

聲音識別部，其存儲與所述提問接受部接受到的提問對應的用戶的聲音的特征，基于存儲的聲音的特征識別所述用戶；

圖像識別部，其在所述提問接受部檢測到聲音時，存儲由所述照相機拍攝到的用戶的圖像或者圖像的特征，并基于存儲的圖像或者圖像的特征識別所述用戶；以及

引導部，其使用所述聲音識別部存儲的用戶的聲音的特征和所述圖像識別部存儲的用戶的圖像或者圖像的特征，選擇進行引導的用戶，從所述揚聲器輸出針對選擇出的用戶的引導用的聲音，

所述提問接受部將檢測到預先登記的聲音的特征或者圖像的特征的用戶設為非引導對象者，將檢測到?jīng)]有預先登記的聲音的特征或者圖像的特征的用戶設為引導對象者，

所述引導部僅對引導對象者的提問進行回答，

所述圖像識別部進行檢測所述照相機拍攝到的引導對象者的反應的處理，

所述聲音引導系統(tǒng)還具備：

會話失敗判定部，其通過非引導對象者的發(fā)聲次數(shù)和所述引導對象者的反應，檢測非引導對象者的發(fā)聲不是引導對象者的期待的發(fā)聲的情況；

回答可否判定部，其判定可否對基于所述提問接受部接受到的聲音的提問進行回答，

在所述會話失敗判定部判定會話失敗，并且所述回答可否判定部判定為能夠回答時，所述引導部輸出對引導對象者的提問的回答。

2.根據(jù)權利要求1所述的聲音引導系統(tǒng)，其特征在于，

所述引導部選擇所述聲音識別部識別出的用戶與所述圖像識別部識別出的用戶一致的用戶，并且使用所述麥克風以及所述揚聲器與選擇出的用戶執(zhí)行會話。

3.根據(jù)權利要求2所述的聲音引導系統(tǒng)，其特征在于，

所述麥克風設置有多個，

所述提問接受部接受來自多個所述麥克風的聲音輸入，并且接受基于在接受到的聲音輸入中具有所述聲音識別部存儲的特征的用戶的聲音最大的麥克風的聲音輸入的提問。

4.根據(jù)權利要求1所述的聲音引導系統(tǒng)，其特征在于，

所述引導部具備翻譯部，該翻譯部將輸出聲音設為翻譯成規(guī)定的語言的聲音，

所述引導部基于所述提問接受部中的輸入到所述麥克風的聲音的接受狀況，而從所述揚聲器輸出所述翻譯部將所述提問接受部接受到的聲音翻譯成規(guī)定的語言的聲音來代替輸出引導用的聲音。

5.一種聲音引導方法，揚聲器輸出基于輸入到麥克風的聲音的引導用的聲音，由此進行基于聲音的引導，其特征在于，

所述聲音引導方法包括：

提問接受部接受基于輸入到所述麥克風的聲音的提問的提問接受處理；

聲音識別部存儲與通過所述提問接受部的提問接受處理接受到的提問對應的用戶的聲音的特征，基于存儲的聲音的特征識別所述用戶的聲音識別處理；

在通過所述提問接受部的提問接受處理檢測到聲音時，圖像識別部存儲由照相機拍攝到的用戶的圖像或者圖像的特征，并且基于存儲的圖像或者圖像的特征識別所述用戶的圖像識別處理；

引導部使用通過所述聲音識別部的聲音識別處理存儲的用戶的聲音和通過所述圖像識別部的圖像識別處理存儲的用戶的圖像或者圖像的特征，選擇進行引導的用戶，從所述揚聲器輸出針對選擇出的用戶的引導用的聲音的引導處理，

所述提問接受處理將檢測到預先登記的聲音的特征或者圖像的特征的用戶設為非引導對象者，將檢測到?jīng)]有預先登記的聲音的特征或者圖像的特征的用戶設為引導對象者，

所述引導部僅對引導對象者的提問進行回答，

所述圖像識別部進行檢測所述照相機拍攝到的引導對象者的反應的處理，

所述聲音引導方法還具備：

通過非引導對象者的發(fā)聲次數(shù)和所述引導對象者的反應，檢測非引導對象者的發(fā)聲不是引導對象者的期待的發(fā)聲的情況的會話失敗判定處理；

判定可否對基于所述提問接受部接受到的聲音的提問進行回答的回答可否判定處理，

在所述會話失敗判定處理判定會話失敗，并且所述回答可否判定處理判定為能夠回答時，所述引導部輸出對引導對象者的提問的回答。