[發明專利]上下文計算機生成現實(CGR)數字助理

在審

• 申請號: 201910880777.4
• 申請日: 2019-09-18
• 公開（公告）號: CN110942518A
• 公開（公告）日: 2020-03-31
• 發明（設計）人: A·巴-茲夫;G·阿布多拉希安;D·W·查爾梅斯;D·H·黃
• 申請（專利權）人: 蘋果公司
• 主分類號: G06T19/00
• 分類號: G06T19/00;G06F3/01
• 代理公司: 北京市金杜律師事務所 11256
• 代理人: 李崢宇

本公開題為上下文計算機生成現實(CGR)數字助理。在一種具體實施中，一種提供上下文計算機生成現實(CGR)數字助理方法是在被提供為遞交CGR場景的設備處執行的，該設備包括一個或多個處理器、非暫態存儲器以及一個或多個顯示器。該方法包括獲取表征由圖像傳感器捕獲的視場的圖像數據。該方法進一步包括在圖像數據中識別多個上下文CGR數字助理中的一者的上下文觸發器。該方法額外包括選擇多個上下文CGR數字助理中的一者的視覺表示，其中該視覺表示是基于上下文并且響應于識別出上下文觸發器而選擇的。該方法還包括通過顯示多個上下文CGR數字助理中的一者的視覺表示來呈現CGR場景，其中視覺表示提供與上下文觸發器相關聯的信息。

相關申請的交叉引用

本專利申請要求2018年9月24日提交的美國臨時專利申請No.62/735,291的優先權，該專利申請據此全文以引用方式并入本文。

技術領域

本公開整體涉及多功能設備上的計算機生成現實應用。

背景技術

物理環境是指人們在沒有電子系統幫助的情況下能夠感測和/或交互的物理世界。物理環境諸如物理公園包括物理物品，諸如物理樹木、物理建筑物和物理人。人們能夠諸如通過視覺、觸覺、聽覺、味覺和嗅覺來直接感測物理環境和/或與物理環境交互。

相反，計算機生成現實(CGR)環境是指人們經由電子系統感知和/或交互的完全或部分模擬的環境。在CGR中，跟蹤人的物理運動的一個子集或其表示，并且作為響應，以符合至少一個物理定律的方式調節在CGR環境中模擬的一個或多個虛擬對象的一個或多個特征。例如，CGR系統可以檢測人的頭部轉動，并且作為響應，以與此類視圖和聲音在物理環境中變化的方式類似的方式調節呈現給人的圖形內容和聲場。在一些情況下(例如，出于可達性原因)，對CGR環境中虛擬對象的特征的調節可以響應于物理運動的表示(例如，聲音命令)來進行。

人可以利用其感官中的任一者來感測CGR對象和/或與CGR對象交互，包括視覺、聽覺、觸覺、味覺和嗅覺。例如，人可以感測音頻對象和/或與音頻對象交互，該音頻對象創建3D或空間音頻環境，該3D或空間音頻環境提供3D空間中點音頻源的感知。又如，音頻對象可以使能音頻透明度，該音頻透明度在有或者沒有計算機生成的音頻的情況下選擇性地引入來自物理環境的環境聲音。在某些CGR環境中，人可以感測和/或只與音頻對象交互。

CGR的示例包括虛擬現實和混合現實。

虛擬現實(VR)環境是指被設計成對于一個或多個感官完全基于計算機生成的感官輸入的模擬環境。VR環境包括人可以感測和/或交互的多個虛擬對象。例如，樹木、建筑物和代表人的化身的計算機生成的圖像是虛擬對象的示例。人可以通過在計算機生成的環境內人的存在的模擬，和/或通過在計算機生成的環境內人的物理運動的一個子組的模擬來感測和/或與VR環境中的虛擬對象交互。

與被設計成完全基于計算機生成的感官輸入的VR環境相比，混合現實(MR)環境是指被設計成除了包括計算機生成的感官輸入(例如，虛擬對象)之外還引入來自物理環境的感官輸入或其表示的模擬環境。在虛擬連續體上，混合現實環境是完全物理環境作為一端和虛擬現實環境作為另一端之間的任何狀況，但不包括這兩端。

在一些MR環境中，計算機生成的感官輸入可以對來自物理環境的感官輸入的變化進行響應。另外，用于呈現MR環境的一些電子系統可以跟蹤相對于物理環境的位置和/或取向，以使虛擬對象能夠與真實對象(即，來自物理環境的物理物品或其表示)交互。例如，系統可以導致運動使得虛擬樹木相對于物理地面看起來是靜止的。

混合現實的示例包括增強現實和增強虛擬。