[發明專利]一種人車互動方法、系統及裝置

在審

• 申請號: 201810837320.0
• 申請日: 2018-07-26
• 公開（公告）號: CN108995590A
• 公開（公告）日: 2018-12-14
• 發明（設計）人: 梁桂浩;和衛民;柳燕飛
• 申請（專利權）人: 廣州小鵬汽車科技有限公司
• 主分類號: B60R1/00
• 分類號: B60R1/00;B60W50/14
• 代理公司: 廣州嘉權專利商標事務所有限公司 44205
• 代理人: 胡輝;鄭澤萍

本發明公開了一種人車互動方法、系統及裝置，該方法包括：實時采集汽車外部環境的圖像并進行虛擬化處理后，投影到汽車的車窗上；對用戶進行檢測，并識別獲得對應的用戶控制信號；根據獲得的用戶控制信號，對虛擬化處理后的圖像再次進行對應的虛擬化處理后，投影到汽車的車窗上。本發明基于圖像采集和汽車車窗，可以實現汽車內外用戶與汽車外部環境的人車互動，體驗感較強，而且較為真實，提高了用戶體驗，可廣泛應用于汽車行業中。

技術領域

本發明涉及汽車智能控制領域，特別是涉及一種人車互動方法、系統及裝置。

背景技術

隨著科技的發展，汽車已經不僅僅是傳統意義上的交通工具，還兼顧了娛樂、與乘客互動等功能。現有技術中的車載娛樂系統，跟普通的平板差別不大，而且僅僅是實現了娛樂功能，與乘客的互動功能較弱。而且，現有技術中的人車互動方案，一般是用戶通過智能終端與車載系統之間進行數據交互，從而實現自動控制等，汽車在這個交互過程中，屬于被動控制的對象，這種方式并不是真正意義上的人車互動。

名詞解釋

GPU：全稱Graphics Processing Unit，指圖形處理器，又稱顯示核心、視覺處理器、顯示芯片，是一種專門在個人電腦、工作站、游戲機和一些移動設備上圖像運算工作的微處理器；

AR：全稱Augmented Reality，表示增強現實技術，是一種實時地計算攝影機影像的位置及角度并加上相應圖像、視頻、3D模型的技術，這種技術的目標是在屏幕上把虛擬世界套在現實世界并進行互動。

發明內容

為了解決上述的技術問題，本發明的目的是提供一種人車互動方法、系統及裝置。

本發明解決其技術問題所采用的第一技術方案是：

一種人車互動方法，包括以下步驟：

實時采集汽車外部環境的圖像并進行虛擬化處理后，投影到汽車的車窗上；

對用戶進行檢測，并識別獲得對應的用戶控制信號；

根據獲得的用戶控制信號，對虛擬化處理后的圖像再次進行對應的虛擬化處理后，投影到汽車的車窗上。

進一步，所述實時采集汽車外部環境的圖像并進行虛擬化處理后，投影到汽車的車窗上的步驟，具體包括：

實時地對汽車外部環境進行圖像采集；

對采集的圖像進行圖像識別處理后，識別獲得外部環境的各類場景物體，進而渲染形成虛擬圖像；

將所形成的虛擬圖像中的各類場景物體進行虛擬化處理后，投影到汽車的車窗上。

進一步，所述人車互動方法在投影過程中，還根據汽車車窗的參數對車窗進行曲面校正。

進一步，所述根據汽車車窗的參數對車窗進行曲面校正的步驟，具體包括：

獲取汽車車窗的曲率參數后，計算獲得車窗與用于進行投影的投影儀之間的幾何關系及變換矩陣；

將待投影的圖像進行分割，提取出圖像的角點信息；

將角點信息與計算獲得的幾何關系及變換矩陣進行矩陣運算，使圖像產生對應的非線性幾何變形后，再進行投影。

進一步，所述對用戶進行檢測，并識別獲得對應的用戶控制信號的步驟，其具體為：

對用戶進行語音檢測或者姿態檢測，并基于檢測獲得的語音信號或姿態信號，識別獲得對應的用戶控制信號。

進一步，所述虛擬化處理具體如下；

將物體轉換為對應的虛擬化物體，

和/或