[發明專利]使用環境傳感器數據的高效的圖像分析

有效

• 申請號: 201880023254.1
• 申請日: 2018-02-09
• 公開（公告）號: CN110506276B
• 公開（公告）日: 2021-10-15
• 發明（設計）人: M.J.布里奇斯;A.菲恩;H.亞當;J.M.吉爾伯特
• 申請（專利權）人: 谷歌有限責任公司
• 主分類號: G06K9/03
• 分類號: G06K9/03;G06K9/00;G06K9/62
• 代理公司: 北京市柳沈律師事務所 11105
• 代理人: 金玉潔

1.一種數據處理系統，包括：

相機，被配置為捕獲圖像；

一個或多個環境傳感器，被配置為檢測所述相機的移動；

數據處理裝置；和

存儲器存儲裝置，與所述數據處理裝置進行數據通信，所述存儲器存儲裝置存儲可由所述數據處理裝置執行的指令，所述指令在這種執行時使得所述數據處理裝置執行包括以下的操作：

對于由移動設備相機捕獲的多個圖像中的每一個，訪問指示在所述相機捕獲所述圖像時所述相機的移動的數據；

基于每個圖像的指示所述相機的移動的數據，從所述多個圖像中選擇用于分析的特定圖像；

使用粗略分類器分析所述特定圖像，以確定所述特定圖像是否描繪了一個或多個特定類別的對象中的至少一個對象；

每當所述特定圖像描繪了所述一個或多個特定類別的對象中的對象時：

使用對象識別過程分析所述特定圖像以識別所述特定圖像中描繪的一個或多個對象；和

呈現與一個或多個識別的對象相關的內容；以及

每當所述特定圖像沒有描繪所述一個或多個特定類別的對象中的對象時，確定不使用對象識別過程分析所述特定圖像，

其中，所述對象類別包括條形碼對象類別、地標對象類別、媒體對象類別、或者藝術品對象類別中的一個或多個。

2.如權利要求1所述的系統，其中，分析所述圖像以識別由所述圖像描繪的一個或多個對象包括：使用一種或多種計算機視覺技術分析所述圖像。

3.如權利要求1所述的系統，其中，指示移動設備的移動的數據包括(i)從所述移動設備的加速計傳感器接收的慣性加速度測量或(ii)從所述移動設備的陀螺儀接收的取向數據中的至少一個。

4.如權利要求1所述的系統，其中，從多個圖像中選擇用于分析的特定圖像包括：基于相對于相機捕獲所述多個圖像中的每個其他圖像時的每個移動量，所述特定圖像具有相機捕獲所述特定圖像時的最小移動量，來選擇所述特定圖像。

5.如權利要求1所述的系統，其中，每個圖像的指示所述移動設備的移動的數據包括描述在捕獲所述圖像時所述移動設備的旋轉運動的數據。

6.如權利要求5所述的系統，其中，從多個圖像中選擇用于分析的特定圖像包括：基于捕獲所述特定圖像時所述移動設備的旋轉運動小于旋轉運動的閾值量來選擇特定圖像。

7.如權利要求1所述的系統，其中，所述操作進一步包括：

在所述粗略分類器完成對先前圖像的分析之后，接收對要由所述粗略分類器分析的圖像的請求，

其中，從多個圖像中選擇用于分析的特定圖像包括：基于相對于先前圖像被發送到粗略分類器以用于分析之后由相機捕獲的圖像集中的其他圖像，特定圖像具有最小的移動量，來選擇該特定圖像。

8.如權利要求1所述的系統，其中，使用粗略分類器分析特定圖像包括由所述粗略分類器基于處理速率周期性地啟動分析。

9.如權利要求8所述的系統，其中，所述操作包括基于與所述相機應用的用戶交互來調整所述處理速率。

10.如權利要求8所述的系統，其中，所述操作包括基于在先前時間段內在由所述粗略分類器分析的一個或多個圖像中是否已經檢測到一個或多個類別的對象的存在來調整所述處理速率。

11.如權利要求10所述的系統，其中，響應于在先前時間段內在至少一個圖像中檢測到一個或多個類別的對象的存在，增加所述處理速率，使得每單位時間由所述粗略分類器分析更多的圖像。

12.如權利要求10所述的系統，其中，響應于在先前時間段內在至少一個圖像中沒有檢測到一個或多個類別的對象的存在，降低處理速率，使得每單位時間由所述粗略分類器分析更少的圖像。