[發明專利]將真實世界資訊擷取入虛擬環境的方法及頭戴式裝置

在審

• 申請號: 202011188887.3
• 申請日: 2020-10-30
• 公開（公告）號: CN114077305A
• 公開（公告）日: 2022-02-22
• 發明（設計）人: 林圣成;劉建欣;林石隆
• 申請（專利權）人: 宏達國際電子股份有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06T19/00;G06T15/00;G02B27/01
• 代理公司: 北京律和信知識產權代理事務所(普通合伙) 11446
• 代理人: 郝文博

1.一種用于將一真實世界資訊擷取入一虛擬環境的方法，其特征在于，適用于位于一物理環境中的一頭戴式裝置，且該方法包含：

提供該虛擬環境，其中該虛擬環境中的一真實世界內容是擷取自該物理環境的一部分，且該物理環境的該部分對應于該頭戴式裝置的一視角；

追蹤由一使用者所移動且位于該物理環境中的一特征點，以藉由投影該特征點的一移動軌跡至該真實世界內容而定義出該真實世界內容的一指定平面；

擷取對應于該指定平面的一影像資訊；以及

產生具有依據該影像資訊所渲染的一外觀的一虛擬物件，其中該虛擬物件的大小可調整。

2.如權利要求1所述的方法，其特征在于，該頭戴式裝置包含一光學相機，且該指定平面的一邊緣的至少部分是依據自該光學相機的一焦點至該特征點的一直線方向將該移動軌跡投影至該真實世界內容而定義。

3.如權利要求2所述的方法，其特征在于，該移動軌跡包含一封閉區域，該指定平面是依據自該光學相機的該焦點至該特征點的該直線方向將該封閉區域投影至該真實世界內容而定義，以使該指定平面與該封閉區域具有互相對應的形狀。

4.如權利要求2所述的方法，其特征在于，該移動軌跡包含方向不同的一X軸向量與一Y軸向量，

該指定平面的該邊緣包含互相連接的一第一側與一第二側，

該第一側與該第二側是依據自該光學相機的該焦點至該特征點的該直線方向將該X軸向量與該Y軸向量分別投影至該真實世界內容而定義。

5.如權利要求4所述的方法，其特征在于，該移動軌跡包含一Z軸向量，實質上垂直于該指定平面的一第三側是依據自該光學相機的該焦點至該特征點的該直線方向將該Z軸向量投影至該真實世界內容而定義，且擷取對應于該指定平面的該影像資訊包含：

擷取一真實世界三維物件的一外表的至少部分作為該影像資訊，其中該真實世界三維物件位于由該指定平面與該第三側所定義的一指定空間中，且該虛擬物件是三維的。

6.如權利要求4所述的方法，其特征在于，擷取對應于該指定平面的該影像資訊包含：

藉由一影像辨識演算法或一深度估測演算法，辨識位于該指定平面中的一真實世界三維物件；以及

擷取該真實世界三維物件的一外表的至少部分作為該影像資訊，其中該虛擬物件是三維的。

7.如權利要求1所述的方法，其特征在于，產生具有依據該影像資訊所渲染的該外觀的該虛擬物件包含：

于該使用者實質上的前方提供該虛擬物件；以及

若該虛擬物件是二維的，將該虛擬物件的一平面調整為垂直于該使用者的一直視方向。

8.如權利要求1所述的方法，其特征在于，該頭戴式裝置包含一深度相機，且產生具有依據該影像資訊所渲染的該外觀的該虛擬物件包含：

透過該深度相機獲得該指定平面的一深度資訊；

依據該深度資訊產生一網格；以及

依據該影像資訊渲染該網格而產生該虛擬物件。

9.如權利要求1所述的方法，其特征在于，該特征點是該使用者的一手指或一手持控制器的一端點，該手持控制器通訊耦接于該頭戴式裝置。

10.如權利要求1所述的方法，其特征在于，該頭戴式裝置包含一光學相機，且該指定平面是藉由一中心投影法將該移動軌跡投影至該真實世界內容而定義，其中該光學相機的一焦點是一投影中心。