[發明專利]基于車輛的實時分析的系統和方法及其用途

在審

• 申請號: 202010019765.5
• 申請日: 2020-01-08
• 公開（公告）號: CN111435456A
• 公開（公告）日: 2020-07-21
• 發明（設計）人: 賈森·米勒;卡爾·南森·克拉克;布蘭登·約翰遜;維吉亞巴布·杰亞拉曼
• 申請（專利權）人: 福特全球技術公司
• 主分類號: G06K9/62
• 分類號: G06K9/62;G06K9/00;G06F16/65;G06F16/75;G06F16/55
• 代理公司: 北京連和連知識產權代理有限公司 11278
• 代理人: 楊帆

1.一種方法，其包括：

由包括與至少一個存儲器通信的至少一個處理器的計算機接收當操作車輛時用戶的至少一個圖像、視頻或音頻；

由所述計算機并基于所述至少一個圖像、視頻或音頻來確定所述用戶在與一個或多個車輛特征進行交互時的情感或情緒；

由所述計算機確定在檢測到所述用戶的所述情感或情緒的時間點之前的用戶動作，其中所述用戶動作與所述一個或多個車輛特征相關；以及

由所述計算機確定所述用戶動作和所述一個或多個車輛特征中的至少一者與所述情感或情緒之間的關聯。

2.根據權利要求1所述的方法，其還包括存儲所述用戶動作、所述一個或多個車輛特征以及所述情感或情緒。

3.根據權利要求1所述的方法，其中收集至少一個圖像、視頻或音頻包括連續地記錄所述用戶的口語單詞并且連續地獲得所述用戶的視頻。

4.根據權利要求3所述的方法，其中分析所述至少一個圖像、視頻或音頻包括以下各項中的任一者：

針對指示與所述一個或多個車輛特征相關的正面或負面情感的關鍵詞或短語來評估所述口語單詞；或者

應用面部識別來確定所述視頻中指示與所述一個或多個車輛特征相關的正面或負面情感的面部表情。

5.根據權利要求1所述的方法，其中所述用戶動作包括提供到所述車輛的人機界面中的用戶輸入或所述車輛的物理部件的用戶利用中的任一者。

6.根據權利要求1所述的方法，其還包括識別在檢測到所述用戶的所述情感或情緒的所述時間點之后的所述用戶動作。

7.根據權利要求6所述的方法，其還包括存儲在檢測到所述用戶的所述情感或情緒的所述時間點之后的所述用戶動作。

8.一種方法，其包括：

實時收集與車輛的一個或多個特征相關的用戶的圖像、視頻或音頻；

使用所述圖像、視頻或音頻實時識別關于所述一個或多個車輛特征的所述用戶的正面或負面的情感或情緒；

實時識別與所述車輛的所述一個或多個車輛特征相關聯的用戶動作，所述車輛的所述一個或多個車輛特征與所述正面或負面情感或情緒相關聯；以及

存儲關于所述用戶動作和所述一個或多個車輛特征的所述實時圖像、視頻或音頻的一部分。

9.根據權利要求8所述的方法，其還包括將來自所述收集的音頻的語音命令分類為與正面或負面情感相關聯。

10.根據權利要求9所述的方法，其中當所述用戶動作與負面情感或情緒相關聯時，與所述用戶動作相關聯的所述一個或多個車輛特征被標記以用于回顧和改善。

11.根據權利要求8所述的方法，其中所述動作包括由所述車輛的人機界面接收的用戶輸入。

12.根據權利要求8所述的方法，其中所述實時圖像、視頻或音頻的所述部分是在與所述用戶動作相關聯的時間之前和之后的一段時間內獲得的。

13.一種系統，其包括：

車輛的人機界面，其被配置為在操作所述車輛時接收用戶輸入；

語音命令系統，其被配置為在操作所述車輛時接收所述用戶的用戶音頻；

相機，其被配置為在操作所述車輛時獲得所述用戶的圖像；以及

實時用戶交互分析系統，其具有處理器和存儲器，所述處理器執行存儲在所述存儲器中的用于進行以下操作的指令：

識別與情感或情緒相關聯的所述用戶的所述用戶音頻或所述圖像中的任一者；

識別與所述用戶的所述用戶音頻或所述圖像相關聯的所述用戶動作；以及

將所述用戶輸入與所述用戶音頻或所述圖像以及所述情感或情緒一起存儲。