[發明專利]一種車載人機交互方法及車載設備

在審

• 申請號: 201910409259.4
• 申請日: 2019-05-16
• 公開（公告）號: CN111552368A
• 公開（公告）日: 2020-08-18
• 發明（設計）人: 毛文濤
• 申請（專利權）人: 毛文濤
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06K9/00
• 代理公司: 深圳余梅專利代理事務所(特殊普通合伙) 44519
• 代理人: 井杰;高真輝

本發明適用于計算機技術領域，提供了一種車載人機交互方法和車載設備，所述方法包括：獲取預設區域內包含手部信息的目標圖像；根據預先訓練完成的手勢識別模型對所述手部信息進行手部關節點識別，獲得所述手部各關節點相對于預設原點的三維空間坐標；根據所述三維空間坐標生成手勢標識信息；根據預先存儲的手勢標識信息與車輛控制指令之間的映射關系，確定當前手勢標識信息對應的車輛控制指令并輸出。由于圖像的采集僅依靠攝像頭就可完成，且對圖像的處理過程比較簡單，因此能夠降低現有技術中人車交互的成本，進一步借助于手勢識別模型，從手部信息中識別出手勢，通過手勢進行人車交互，不容易受周邊環境的影響，能夠提高用戶的體驗效果。

技術領域

本發明屬于計算機技術領域，尤其涉及一種車載人機交互方法及車載設備。

背景技術

傳統的車載設備一般包括車載監控系統、車載GPS系統、3G車載系統、車載信息系統等需要駕駛人員借助按鍵，或者觸屏的方式來進行人車交互。這種人車交互方式需要占據一定的空間且交互過程不靈活，無法滿足用戶豐富的交互需求。

隨著用戶需求的不斷提高，伴隨著出現了各種人車交互方式，其中最常見的是通過語音進行人車交互，這種交互方式很容易受到周圍語音信號的干擾，且對語音信號的采集以及處理過程比較復雜，不僅增加用戶的使用成本且容易給用戶造成使用麻煩。有鑒于此，如何提供一種低成本且安全有效的多功能人車交互方式，提高用戶的體驗效果是人車交互過程中需要解決的問題。

發明內容

有鑒于此，本發明實施例提供了車載人機交互方法及車載設備，以降低現有技術中人車交互的成本，提高用戶的體驗效果。

本發明實施例的第一方面提供了一種車載人機交互方法，包括：

獲取預設區域內包含手部信息的目標圖像；

根據預先訓練完成的手勢識別模型對所目標圖像中的手部信息進行手部關節點識別，獲得所述手部各關節點相對于預設原點的三維空間坐標；

根據所述三維空間坐標生成手勢標識信息；

根據預先存儲的手勢標識信息與車輛控制指令之間的映射關系，確定當前手勢標識信息對應的車輛控制指令并輸出。

可選地，所述預先訓練完成的手勢識別模型為神經網絡模型，所述根據預先訓練完成的手勢識別模型對所述手部信息進行手部關節點識別之前，包括：

獲取第一預設數量的包含手部信息的圖片；

將所述包含手部信息的圖片分別輸入至所述神經網絡模型進行模型訓練，獲得模型輸出的各手部信息包含的手部各關節點相對于預設原點的預測三維空間坐標；

分別將各手部信息的所述預測三維空間坐標與預先存儲的各手部信息包含的各關節點相對于預設原點的標準三維空間坐標進行比較；

若各手部信息包含的各關節點的預測三維空間坐標分別與各手部信息對應包含的各關節點的標準三維空間坐標相比，重合的概率大于預設的第一概率閾值，則確定所述神經網絡模型為訓練完成的手勢識別模型，停止對所述手勢識別模型的訓練。

可選地，在所述分別將各手部信息的所述預測三維空間坐標與預先存儲的所有手部信息包含的各關節點相對于預設原點的標準三維空間坐標進行比較的步驟之后，包括：

若所有手部信息包含的各關節點的預測三維空間坐標分別與各手部信息對應包含的各關節點的標準三維空間坐標相比，重合的概率小于或者等于預設的第一概率閾值，則增加第二預設數量的包含手部信息的圖片，并返回執行將所有所述包含手部信息的圖片輸入至所述神經網絡模型進行模型訓練，獲得模型輸出的所有手部信息包含的手部各關節點相對于預設原點的預測三維空間坐標的步驟。

可選地，所述預設原點為預先確定的采集所述目標圖像的攝像頭的三維空間坐標；