[發明專利]用于操作移動相機以用于低功率使用的方法和裝置

有效

• 申請號: 201980008306.2
• 申請日: 2019-01-09
• 公開（公告）號: CN111919433B
• 公開（公告）日: 2022-09-27
• 發明（設計）人: D·莫洛尼;A·德加尼
• 申請（專利權）人: 莫維迪烏斯有限公司
• 主分類號: H04N5/232
• 分類號: H04N5/232;G10L15/16;G10L25/30;G10L25/51;G06V10/25
• 代理公司: 永新專利商標代理有限公司 72002
• 代理人: 劉瑜

1.一種移動相機，包括：

第一狀態轉換器，其用于響應于在運動傳感器數據中檢測到運動特征而將所述移動相機從運動特征檢測狀態轉換到音頻特征檢測狀態，所述移動相機用于在所述運動特征檢測狀態中使用比在所述音頻特征檢測狀態中更低的功耗來進行操作；

第一卷積神經網絡，其用于響應于在音頻傳感器數據中檢測到音頻特征而識別所述音頻傳感器數據中的所述音頻特征；

第二狀態轉換器，其用于響應于所述第一卷積神經網絡識別所述音頻特征而將所述移動相機從所述音頻特征檢測狀態轉換到相機特征檢測狀態，所述移動相機用于在所述相機特征檢測狀態中使用比在所述音頻特征檢測狀態中更高的功耗來操作；

第二卷積神經網絡，其用于在所述相機特征檢測狀態下識別視覺捕獲數據中的圖像特征；以及

通信接口，其用于向外部設備發送以下中的至少一個：(a)與所述運動特征或者所述音頻特征相對應的第一元數據，或(b)與所述圖像特征相對應的第二元數據。

2.根據權利要求1所述的移動相機，還包括：

圖像特征檢測器，所述圖像特征檢測器在電路中與低分辨率相機連接，所述低分辨率相機用于在所述相機特征檢測狀態下提供所述視覺捕獲數據，所述圖像特征檢測器用于檢測所述視覺捕獲數據中的所述圖像特征；以及

高分辨率相機，當所述移動相機處于所述相機特征檢測狀態時，所述高分辨率相機具有待機模式，并且當所述移動相機處于高分辨率相機特征檢測狀態時，所述高分辨率相機具有活動模式。

3.根據權利要求1或2中的任一項所述的移動相機，還包括特征檢測器，其用于確定所述音頻特征是否滿足特征觸發閾值，所述第一卷積神經網絡用于響應于所述音頻特征滿足所述特征觸發閾值而生成所述第一元數據。

4.根據權利要求1所述的移動相機，還包括運動特征檢測器，所述運動特征檢測器在電路中與慣性測量單元連接，所述運動傳感器數據由在電路中與所述慣性測量單元連接的運動傳感器提供，并且所述運動特征檢測器用于檢測所述運動傳感器數據中的所述運動特征。

5.根據權利要求1所述的移動相機，其中，第三卷積神經網絡用于通過將所述運動特征與參考運動元數據庫中的參考運動特征定義進行比較來生成所述第一元數據。

6.根據權利要求1所述的移動相機，還包括音頻特征檢測器，所述音頻特征檢測器在電路中與音頻編解碼器連接，并且所述音頻特征檢測器用于基于具有以下中的至少一個的所述音頻特征來檢測所述音頻傳感器數據中的所述音頻特征：用于滿足閾值的足夠的幅度或足夠的持續時間。

7.根據權利要求6所述的移動相機，其中，所述第一卷積神經網絡用于通過將所述音頻特征與參考音頻元數據庫中的參考音頻特征定義進行比較來生成所述第一元數據。

8.根據權利要求6或7中的任一項所述的移動相機，其中，所述音頻特征檢測器用于基于以下中的至少一個來檢測所述音頻傳感器數據中的所述音頻特征：(a)語音、(b)車輛聲音、或者(c)所述音頻傳感器數據中反映的音頻信號的變化率。

9.根據權利要求1所述的移動相機，還包括圖像特征檢測器，所述圖像特征檢測器在電路中與低分辨率相機連接，所述圖像特征檢測器用于檢測所述視覺捕獲數據中的所述圖像特征。

10.根據權利要求9所述的移動相機，其中，所述第二卷積神經網絡用于通過將所述圖像特征與參考圖像元數據庫中的參考視覺特征定義進行比較來生成所述第二元數據。

11.根據權利要求9或10中的任一項所述的移動相機，其中，所述圖像特征檢測器用于基于以下中的至少一個來檢測所述視覺捕獲數據中的所述圖像特征：在所述視覺捕獲數據中的(a)邊緣、(b)線、或(c)面。