[發明專利]提供實時產品交互協助的系統和方法

有效

• 申請號: 201880097904.7
• 申請日: 2018-10-15
• 公開（公告）號: CN112771472B
• 公開（公告）日: 2022-06-10
• 發明（設計）人: 蘇萬里;朱玉潔;楊鳴一;陶姍;猶哈·吉爾馬;黃建華
• 申請（專利權）人: 美的集團股份有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 北京派特恩知識產權代理有限公司 11270
• 代理人: 蔣雅潔;張穎玲

一種用于提供用戶交互的實時虛擬體驗的方法，包括：基于包括物理對象的一個或多個表征的物理環境的一個或多個圖像渲染3?D虛擬環境；接收用戶輸入，以將第一預設虛擬對象布置在所述3?D虛擬環境的空間中；渲染第一預設虛擬對象；通過一個或多個攝像頭檢測與第一預設虛擬對象交互的用戶手勢；將所述用戶手勢轉換成與第一預設虛擬對象的交互；識別第一預設虛擬對象的受與第一預設虛擬對象交互支配的第一部分；以及在顯示器上同時實時顯示所述用戶手勢的表征和由3?D虛擬環境中的交互引起的第一預設虛擬對象的第一部分的移動。

技術領域

本公開涉及家用電器，尤其涉及提供與家用電器產品的實時虛擬交互，以及為用戶與家用電器產品的交互提供虛擬輔助。

背景技術

在當今電子商務日益普及的時代，許多產品供應商投入大量資源來開發和使用在線銷售平臺，該銷售平臺展示出了列表中的產品的圖像，并通過提供產品描述、在線評價和單個產品頁面上的信息視頻來促進銷售。盡管在線銷售平臺也為家用電器的銷售提供了渠道，但是常規的在線銷售平臺無法滿足用戶試用家用電器、了解其功能以及與家用電器進行虛擬交互體驗或在模仿用戶家里的預期操作環境的虛擬環境中觀看家用電器操作的愿望。虛擬/增強現實(VR/AR)環境至少包括一些表征或增強物理世界中的相應對象的虛擬元素。但是，傳統的VR/AR技術效率低下，并且無法很好地將虛擬產品整合在虛擬環境中。此外，用于檢測用戶與虛擬對象的交互的用戶輸入(例如，通過各種傳感器檢測到的)不太直觀且效率較低。

因此，需要一種有效且更直觀的方法或系統來提供與用戶與對象的交互相關聯的實時虛擬體驗。

發明內容

因此，需要具有改進的方法和界面的計算機系統，以使用用戶手勢實時地在增強和虛擬現實(VR/AR)環境中實時渲染用戶的交互。該方法和界面可選地補充或替代了用于與VR/AR環境進行交互的常規方法。通過本公開的計算機系統能夠減少或消除與用于VR/AR的用戶界面相關聯的上述缺陷和其他問題。例如，該方法和界面為用戶提供了使用手勢與AR/VR環境中的一個或多個對象進行交互的生動虛擬體驗。該方法和界面還向用戶提供與產品的虛擬視圖同時顯示的虛擬輔助樣板，以幫助安置產品或使用用戶的手勢來裝配產品。

在一些實施例中，本公開提供了一種用于提供用戶與對象交互的實時虛擬體驗的方法。該方法包括：在具有顯示器、一個或多個攝像頭、一個或多個處理器和存儲器的電子設備(例如用戶設備)中：基于物理環境的一個或多個圖像在所述顯示器上渲染3-D虛擬環境，所述3-D虛擬環境包括布置在所述物理環境中的物理對象的一個或多個表征；接收用戶輸入，以將第一預設虛擬對象布置在所述3-D虛擬環境中的與所述物理環境中的空間相對應的空間中；響應于所述用戶輸入，渲染布置在所述3-D虛擬環境的空間中的所述第一預設虛擬對象；通過所述一個或多個攝像頭檢測與所述3-D虛擬環境中的所述第一預設虛擬對象交互的用戶手勢；響應于檢測到所述用戶手勢：將所述用戶手勢轉換成與所述3-D虛擬環境中的所述第一預設虛擬對象的交互；在所述3-D虛擬環境中識別所述虛擬環境中的所述第一預設虛擬對象的第一部分，其中，所述第一預設虛擬對象的第一部分受所述與虛擬環境中的所述第一預設虛擬對象的交互的支配；并在所述顯示器上同時實時顯示：所述用戶手勢在所述3-D虛擬環境中的表征；和由與所述3-D虛擬環境中的所述第一預設虛擬對象的交互引起的所述第一預設虛擬對象的所述第一部分的移動。