[發明專利]對呈現流水線的直接運動傳感器輸入

有效

• 申請號: 201680071019.2
• 申請日: 2016-11-16
• 公開（公告）號: CN108369343B
• 公開（公告）日: 2021-04-27
• 發明（設計）人: A·V·別洛格洛維
• 申請（專利權）人: 英特爾公司
• 主分類號: G02B27/01
• 分類號: G02B27/01;G06T15/08
• 代理公司: 上海專利商標事務所有限公司 31100
• 代理人: 高見;張欣

本文描述了用于對呈現流水線的直接運動傳感器輸入的系統和技術。可經由至呈現流水線的輸入端口從傳感器接收視圖參數。可將呈現對象指派給呈現流水線中的著色器。視圖參數可被應用于著色器以重新呈現呈現對象。可將重新呈現的呈現對象輸出至輸出互鏈路，該輸出互鏈路提供用于顯示重新呈現的呈現對象的指令。

優先權申請

本申請要求2015年12月21日提交的美國申請S/N.14/976,862的優先權的權益，該申請通過引用整體結合于此。

技術領域

本文所描述的實施例一般涉及圖形呈現硬件，并且更具體地涉及對呈現流水線的直接運動傳感器輸入。

背景技術

增強現實(AR)是用于定義以下原理的術語：將新的虛擬對象添加至現實場景(例如，由相機捕捉)使得兩者皆可在顯示器上被看到。例如，包括人的房間的視頻饋送可使卡通角色在該饋送中被呈現，以使得看起來角色站在人旁邊。在示例中，呈現可使得對于觀看饋送的人而言，該呈現看起來人正與角色交互。

頭戴式顯示器是穿戴于用戶頭部的、具有用戶可觀看的顯示元件的設備。頭戴式顯示器可看起來像眼鏡、頭盔等。常常，顯示元件在未被使用時是透明的，使得用戶“透視(see through)”顯示器至現實世界，但也可觀察被呈現至顯示元件的元素。常常，頭戴式顯示器是傳感器組以及透明或不透明顯示器的組合，這使得“繪制”到如由用戶感知的現實場景上成為可能。

雖然AR不是用于頭戴式顯示器的唯一應用，但其是用于這些顯示器的重要應用。為了支持此應用，一些供應商為頭戴式顯示器上的AR提供片上系統(SoC)平臺。開發頭戴式顯示器的傳統SoC和硬件制造商常常重用現有技術組件。在用于AR的視頻呈現的情形中，GPU一般在呈現之后立即執行視頻合成(在流水線內)。音頻處理一般也是如此。

附圖說明

在附圖中(這些附圖不一定是按比例繪制的)，相同的數字可描述在不同視圖中的類似的組件。具有不同的字母后綴的相同的數字可以表示類似組件的不同實例。附圖一般通過示例但非限制方式來示出在本文檔中討論的各種實施例。

圖1是根據實施例的包括用于對呈現流水線的直接運動傳感器輸入的系統的環境的示例的框圖。

圖2是根據實施例的包括用于對呈現流水線的直接運動傳感器輸入的系統的示例的框圖。

圖3是根據實施例的包括用于對呈現流水線的直接運動傳感器輸入的方法的示例。

圖4是例示可在其上實現一個或多個實施例的機器的示例的框圖。

具體實施方式

AR工作負載可能要求常常旨在被穿戴的硬件，并頻繁地受制于能量限制(例如，在電池上運行)。頭戴式顯示器的AR工作負載的困難問題是持續維持將對象呈現至顯示器上的場景(例如，嵌入至場景)的正確映射。即，為了使嵌入對象隨著用戶頭部的移動變換、移位、旋轉以看起來像是其是場景的一部分。透視顯示器傾向于使問題惡化，因為在顯示器呈現呈現對象時不對用戶隱藏場景。因此，常常在用戶移動其頭部時，呈現對象顯得與場景不協調。

為了解決以上注意到的問題，可使用對呈現流水線的修改。特別地，呈現流水線可被修改成將運動傳感器數據直接接受至呈現流水線硬件并使用運動數據來直接變換呈現對象。這可被稱為單點主動對齊方法(SPAAM)，并且對包括光學透視顯示器的頭戴式顯示器而言可以是有效的。原理包括對AR的校準，該校準基于對呈現對象的選擇以及對用于坐標系統的點的跟蹤(用于在用戶移動時繼續進行坐標轉換/變換)。