[發明專利]用于由圖像識別觸發的增強現實內容的回放的系統和方法

在審

• 申請號: 202080068204.2
• 申請日: 2020-02-28
• 公開（公告）號: CN114450967A
• 公開（公告）日: 2022-05-06
• 發明（設計）人: 麥克斯·斯皮爾;尼古拉斯·索利欣;阿尼什·德斯坎;余愷;雅各布·漢沙;李玥;查爾斯·迪發茲
• 申請（專利權）人: 谷歌有限責任公司
• 主分類號: H04N21/234
• 分類號: H04N21/234;H04N21/2343;H04N21/4223;H04N21/431;H04N21/4728;H04N21/6547;H04N21/422
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 李佳;周亞榮

提供了用于相對快速且相對容易地訪問包括動態增強現實(AR)內容的AR內容的系統和方法。啟用的目標實體可以在移動計算設備的相機視圖內標識，并且服務器計算設備可以標識所述目標實體，將所述目標實體與動態AR內容相匹配，并且將所述動態AR內容傳輸給所述客戶端計算設備。這可以允許用戶消費內容豐富的信息和/或體驗與所述圖像及其周圍的對象的實時交互，所述信息和/或體驗否則將難以濃縮到物理介質中和/或濃縮到物理介質中是無法實現的，和/或否則將難以在實時交互式體驗中提供和/或在實時交互式體驗中提供是無法實現的。

技術領域

這涉及圖像內容的顯示，具體地涉及增強現實視頻內容的回放。

背景技術

移動計算設備(諸如例如智能手機、平板計算設備等)的用戶可能喜歡使用他們的移動計算設備來更了解關于用戶并且計算設備正在操作的環境中的對象、實體等。移動計算設備通常包括圖像傳感器或相機。這些相機可以捕獲計算設備操作的環境中的實體的圖像。經由移動計算設備與那些實體相關的內容或體驗的可用性可以改進用戶體驗，并且可以增強移動計算設備對用戶的功能性和效用。

發明內容

在一個通用方面中，一種計算機實施的方法可以包括：在客戶端計算設備的實時取景器內捕獲圖像；由客戶端計算設備向服務器計算設備傳輸查詢，該查詢包括圖像；由客戶端計算設備從服務器計算設備接收對查詢的響應，該響應包括增強現實內容；以及觸發用戶界面屏幕在客戶端計算設備上的顯示，用戶界面屏幕包括在輪廓內顯示的增強現實內容，該輪廓由從服務器計算設備接收的響應中所包括的坐標定義。

在一些實施方式中，圖像可以包括在客戶端計算設備的實時取景器的視野內捕獲的目標實體。在一些實施方式中，接收對查詢的響應可以包括接收與圖像中所包括的目標實體相關聯的增強現實視頻內容。在一些實施方式中，從服務器計算設備接收對查詢的響應可以包括接收坐標，該坐標定義用于在用戶界面屏幕上顯示增強現實視頻內容的輪廓，該輪廓對應于目標實體的外圍。

在一些實施方式中，觸發用戶界面屏幕的顯示可以包括：在客戶端計算設備的實時取景器內顯示用戶界面屏幕；以及在對應于坐標的附著點處將增強現實視頻內容的顯示附著到目標實體，使得增強現實視頻內容的顯示保持附著到客戶端計算設備的實時取景器內的目標實體。

在一些實施方式中，計算機實施的方法還可以包括：檢測客戶端計算設備的第一移動；響應于檢測到的第一移動來移位客戶端計算設備的實時取景器內的目標實體的顯示；以及移位增強現實視頻內容的顯示以對應于目標實體在客戶端計算設備的實時取景器內的移位顯示位置。在一些實施方式中，檢測第一移動可以包括：檢測客戶端計算設備的實時取景器與目標實體之間的位置、定向或距離的改變中的至少一個；并且移位增強現實視頻內容的顯示可以包括：改變增強現實視頻內容的顯示位置、顯示定向或顯示大小中的至少一個以相應地對應于目標實體的改變的顯示位置、定向或距離。在一些實施方式中，計算機實施的方法還可以包括：檢測客戶端計算設備的第二移動，使得目標實體未在客戶端計算設備的實時取景器內捕獲；并且響應檢測到的第二移動來終止增強現實視頻內容的顯示。在一些實施方式中，觸發用戶界面屏幕的顯示可以包括：循環增強現實內容，直到第二移動被檢測到為止，或者直到終止輸入被接收到為止。

在一些實施方式中，觸發用戶界面屏幕的顯示可以包括：觸發顯示面板和用戶輸入面板的顯示；并且接收對查詢的響應可以包括：接收增強現實視頻內容以在用戶界面屏幕的顯示面板上顯示；以及接收與目標實體相關的輔助信息，以顯示在用戶界面屏幕的用戶輸入面板上。

在一些實施方式中，在客戶端計算設備的實時取景器內捕獲圖像、傳輸、接收和觸發是在客戶端計算設備上運行的應用內完成的。

在另一通用方面中，一種計算機實施的方法可以包括：由服務器計算設備接收來自客戶端計算設備的查詢，該查詢包括圖像；由服務器計算設備的識別引擎檢測查詢中所包括的圖像內的目標實體；在服務器計算設備的索引數據庫中，將目標實體與來自外部提供方的增強現實內容相匹配；以及將增強現實內容傳輸給客戶端計算設備以供客戶端計算設備輸出。