[發(fā)明專利]三維仿真系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201810006408.8
• 申請日: 2018-01-03
• 公開（公告）號: CN108268136B
• 公開（公告）日: 2023-06-02
• 發(fā)明（設(shè)計）人: 謝亞斯·安奈德·帕蘭彼;菲利普·阿蘭·赫瑟林頓;倫納德·查爾斯·萊頓
• 申請（專利權(quán)）人: 黑莓有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F30/20
• 代理公司: 中科專利商標(biāo)代理有限責(zé)任公司 11021
• 代理人: 余婧娜

多模式系統(tǒng)和方法處理一個或多個傳感器信號，并通過圖像或視頻序列的連續(xù)幀之間的時空相關(guān)性從一個或多個傳感器信號中提取特征。多模式系統(tǒng)和方法通過圖像相減或相干性測量來確定特征的運動和方向，并且響應(yīng)于檢測到的運動和方向或觸發(fā)來合成樂器信號。將虛構(gòu)樂器信號添加到交通工具內(nèi)的信息娛樂信號。

優(yōu)先權(quán)要求

本申請要求于2017年1月4日提交的題為“三維仿真系統(tǒng)”的美國臨時專利申請第62/442,297號的優(yōu)先權(quán)，其通過引用并入本文。

技術(shù)領(lǐng)域

本公開涉及仿真，并且特別涉及允許用戶通過運動和語音命令與系統(tǒng)交互的多模式用戶接口。

背景技術(shù)

在玩虛構(gòu)或虛擬樂器的同時在交通工具中唱歌是司機和其他乘客自娛自樂的流行方式。即使乘客經(jīng)常受到安全帶的限制，他們?nèi)匀豢梢栽诮煌üぞ邇?nèi)四處移動，并且玩虛構(gòu)樂器，或者按照節(jié)奏敲擊手指，或者通過“沖擊空氣”強調(diào)和弦。這種行為可能是有趣的，同時也減少了損害精神處理和決策從而增加事故風(fēng)險的駕駛員疲勞。

發(fā)明內(nèi)容

根據(jù)本公開的一方面，提供了一種用機器可執(zhí)行指令編碼的非暫態(tài)機器可讀介質(zhì)，其中所述機器可執(zhí)行指令的執(zhí)行用于：一次接收并處理多個類型的傳感器信號；通過圖像或視頻序列中的連續(xù)幀之間的時空相關(guān)性，從所述多個類型的傳感器信號中提取特征；通過圖像相減或通過超過閾值激活的觸發(fā)級別來確定所述特征的運動和方向；響應(yīng)于所確定的運動和方向而合成用于模仿或呈現(xiàn)虛構(gòu)樂器的電子信號，其中所確定的運動和方向包括對用戶假裝演奏所述虛構(gòu)樂器的行為的仿真；以及將所述用于模仿或呈現(xiàn)虛構(gòu)樂器的電子信號添加到源自信息娛樂源的信號。

根據(jù)本公開的另一方面，提供了一種多模式方法，包括：一次接收并處理多個類型的傳感器信號；通過圖像或視頻序列中的連續(xù)幀之間的時空相關(guān)性，從所述多個類型的傳感器信號中提取特征；通過圖像相減或通過超過閾值激活的觸發(fā)級別來確定所述特征的運動和方向；響應(yīng)于所確定的運動和方向而合成用于模仿或呈現(xiàn)虛構(gòu)樂器的電子信號，其中所確定的運動和方向包括對用戶假裝演奏所述虛構(gòu)樂器的行為的仿真；以及將所述用于模仿或呈現(xiàn)虛構(gòu)樂器的電子信號添加到源自信息娛樂源的信號。

附圖說明

參考以下附圖和描述可以更好地理解本公開。附圖中的組件不一定按比例繪制，而是將重點放在說明本公開的原理上。此外，在附圖中，貫穿不同的視圖，相同的附圖標(biāo)記指定相應(yīng)的部分。

圖1是將用戶交互轉(zhuǎn)換成虛擬環(huán)境中的動作的多模式用戶接口的俯視示意圖。

圖2是將用戶交互轉(zhuǎn)換成虛擬環(huán)境中的動作的多模式用戶接口。

圖3是傳輸聽覺、視覺和觸覺輸出的多模式用戶接口。

圖4是將用戶交互轉(zhuǎn)換成虛擬環(huán)境中的動作的第二多模式用戶接口的框圖。

圖5是將用戶交互轉(zhuǎn)換成虛擬環(huán)境中的動作的第二多模式用戶接口的框圖。

具體實施方式

多模式用戶接口提供了控制交通工具中的應(yīng)用的自然、高效且簡單的方法。接口以直觀的方式與有形和虛擬技術(shù)進行交互，與傳統(tǒng)的依賴諸如鍵盤和鼠標(biāo)的物理輸入的方法不同，允許用戶通過自然的人機交互或運動來控制諸如合成器或交通工具的應(yīng)用。多模式接口允許雙向通信，允許應(yīng)用程序接收用戶的交互作為輸入，并且用戶通過感覺、聲音(例如觸覺反饋)和/或二維或三維視覺系統(tǒng)接收可感知的響應(yīng)。與傳統(tǒng)接口不同，多模式用戶接口一次接收并處理多個虛擬輸入，允許接口服務(wù)于兩個或更多個同時運行的應(yīng)用。多模式接口是獨立于應(yīng)用的，并且處理不顯眼且完全不依賴于靠近來操作的傳感器輸入的陣列。