[發明專利]人車互動方法、系統以及車輛和計算機可讀存儲介質

在審

• 申請號: 201911243603.3
• 申請日: 2019-12-06
• 公開（公告）號: CN112927721A
• 公開（公告）日: 2021-06-08
• 發明（設計）人: 蔡漢嘉
• 申請（專利權）人: 觀致汽車有限公司
• 主分類號: G10L25/63
• 分類號: G10L25/63;G10L15/26;G10L15/30;G06K9/00
• 代理公司: 北京清亦華知識產權代理事務所(普通合伙) 11201
• 代理人: 付文虹

本發明公開了一種人車互動方法、系統以及車輛和計算機可讀存儲介質，其中，人車互動方法包括：通過設置在車內的麥克風接收用戶的語音信息，并通過設置在車內的攝像頭采集人臉圖像；對語音信息進行識別，得到第一情緒信息，以及對人臉圖像進行識別，得到第二情緒信息；根據第一情緒信息和第二情緒信息確定最終識別結果，得到第三情緒信息；根據第三情緒信息調整車載顯示屏顯示的虛擬人物的情緒。由此，該方法能夠結合用戶的語音信息和人臉圖像識別用戶的情緒信息，進而調整虛擬人物的情緒信息，更加擬人化，從而能夠提高情緒識別的準確性，增加駕駛時的趣味性。

技術領域

本發明涉及車輛技術領域，尤其涉及一種人車互動方法、系統以及車輛和計算機可讀存儲介質。

背景技術

目前，車載虛擬人物雖然已經應用到全息投影技術，但其仍存在不夠擬人化的問題，例如通過語義理解無法完美進行表情詮釋、模擬，通過拍攝人臉不一定能虛擬出反應用戶真實狀態的人物等。

發明內容

本發明旨在至少在一定程度上解決相關技術中的技術問題之一。

為此，本發明的第一個目的在于提出一種人車互動方法，以結合用戶的語音信息和人臉圖像識別用戶的情緒信息，進而調整虛擬人物的情緒信息，更加擬人化，從而能夠提高情緒識別的準確性，增加駕駛時的趣味性。

本發明的第二個目的在于提出一種計算機可讀存儲介質。

本發明的第三個目的在于提出一種人車互動系統。

本發明的第四個目的在于提出一種車輛。

為達上述目的，本發明第一方面實施例提出了一種人車互動方法，包括：通過設置在車內的麥克風接收用戶的語音信息，并通過設置在車內的攝像頭采集人臉圖像；對所述語音信息進行識別，得到第一情緒信息，以及對所述人臉圖像進行識別，得到第二情緒信息；根據所述第一情緒信息和所述第二情緒信息確定最終識別結果，得到第三情緒信息；根據所述第三情緒信息調整車載顯示屏顯示的虛擬人物的情緒。

根據本發明實施例的人車互動方法，首先，通過車內的麥克風接收用戶的語音信息，并通過車內的攝像頭采集人臉圖像；然后，對語音信息進行識別，進而得到第一情緒信息，以及對人臉圖像進行識別，進而得到第二情緒信息；再然后，根據第一情緒信息和第二情緒信息確定最終識別結果，以得到第三情緒信息；最后，根據第三情緒信息調整車載顯示屏顯示的虛擬人的情緒。由此，該方法能夠結合用戶的語音信息和人臉圖像識別用戶的情緒信息，進而調整虛擬人物的情緒信息，更加擬人化，從而能夠提高情緒識別的準確性，增加駕駛時的趣味性。

另外，根據本發明上述實施例的人車互動方法還可以具有如下附加的技術特征：

根據本發明的一個實施例，所述對所述語音信息進行識別，包括：通過設置在車輛上的本地語音識別模塊對所述語音信息進行識別；如果所述本地語音識別模塊不能從所述語音信息中提取到情緒特征，則將所述語音信息發送至云端，以通過云端語音識別模塊對所述語音信息進行識別。

根據本發明的一個實施例，所述對所述語音信息進行識別，還包括：將所述語音信息轉換為文字信息；對所述文字信息進行分詞和語義解析，并判斷從所述文字信息中是否能夠提取到情緒特征；如果從所述文字信息中能夠提取到情緒特征，則將所述情緒特征作為所述第一情緒信息；如果從所述文字信息中不能夠提取到情緒特征，則判定所述語音信息無語義，并將無語義特征作為所述第一情緒信息。

根據本發明的一個實施例，所述第二情緒信息為表征情緒程度的信息或無法判斷信息。