[發明專利]基于視頻數據的實時姿態識別方法及裝置、計算設備

有效

• 申請號: 201711405696.6
• 申請日: 2017-12-22
• 公開（公告）號: CN107895161B
• 公開（公告）日: 2020-12-11
• 發明（設計）人: 董健
• 申請（專利權）人: 北京奇虎科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62
• 代理公司: 深圳市世紀恒程知識產權代理事務所 44287
• 代理人: 胡海國

1.一種基于視頻數據的實時姿態識別方法，所述方法對所述視頻數據所包含的幀圖像進行分組處理，其包括：

實時獲取圖像采集設備所拍攝和/或所錄制的視頻中的當前幀圖像；

將所述當前幀圖像輸入至經訓練得到的神經網絡中，根據所述當前幀圖像在其所屬分組中的幀位置，對當前幀圖像進行姿態識別，得到對所述當前幀圖像中特定對象的姿態識別結果；

根據所述特定對象的姿態識別結果，確定對應的待響應的命令，以供所述圖像采集設備所在終端設備響應所述待響應的命令；

其中，所述將所述當前幀圖像輸入至經訓練得到的神經網絡中，根據所述當前幀圖像在其所屬分組中的幀位置，對當前幀圖像進行姿態識別，得到對所述當前幀圖像中特定對象的姿態識別結果進一步包括：

判斷所述當前幀圖像是否為任一分組的第1幀圖像；

若是，則將所述當前幀圖像輸入至經訓練得到的神經網絡中，經過該神經網絡全部卷積層和反卷積層的運算后，得到對所述當前幀圖像中特定對象的姿態識別結果；

若否，則將所述當前幀圖像輸入至經訓練得到的神經網絡中，在運算至所述神經網絡的第i層卷積層得到第i層卷積層的運算結果后，獲取當前幀圖像所屬分組的第1幀圖像輸入至所述神經網絡中得到的第j層反卷積層的運算結果，直接將所述第i層卷積層的運算結果與所述第j層反卷積層的運算結果進行圖像融合，得到對所述當前幀圖像中特定對象的姿態識別結果；其中，i和j為自然數，第i層卷積層和第j層反卷積層之間具有對應關系，該對應關系具體為第i層卷積層的運算結果與第j層反卷積層的運算結果的輸出維度相同。

2.根據權利要求1所述的方法，其中，所述圖像采集設備所在終端設備所顯示的圖像為所述當前幀圖像；

所述根據所述特定對象的姿態識別結果，確定對應的待響應的命令，以供所述圖像采集設備所在終端設備響應所述待響應的命令進一步包括：

根據所述特定對象的姿態識別結果，確定對應的對當前幀圖像待響應的效果處理命令，以供所述圖像采集設備所在終端設備響應待響應的效果處理命令。

3.根據權利要求2所述的方法，其中，所述根據所述特定對象的姿態識別結果，確定對應的對當前幀圖像待響應的效果處理命令，以供所述圖像采集設備所在終端設備響應待執行的效果處理命令進一步包括：

根據所述特定對象的姿態識別結果，以及所述當前幀圖像中的包含的與交互對象的交互信息，確定對應的對當前幀圖像待響應的效果處理命令。

4.根據權利要求2所述的方法，其中，所述待響應的效果處理命令包括效果貼圖處理命令、風格化處理命令、亮度處理命令、光照處理命令和/或色調處理命令。

5.根據權利要求1所述的方法，其中，所述圖像采集設備所在終端設備所顯示的圖像為所述當前幀圖像；

所述根據所述特定對象的姿態識別結果，確定對應的待響應的命令，以供所述圖像采集設備所在終端設備響應所述待響應的命令進一步包括：

根據所述特定對象的姿態識別結果，確定對應的對外部設備的操作指令，以供所述圖像采集設備所在終端設備響應所述操作指令對所述外部設備進行操作。

6.根據權利要求1所述的方法，其中，所述圖像采集設備所在終端設備所顯示的圖像不是所述當前幀圖像；

所述根據所述特定對象的姿態識別結果，確定對應的待響應的命令，以供所述圖像采集設備所在終端設備響應所述待響應的命令進一步包括：

獲取所述圖像采集設備所在終端設備所顯示的圖像；

根據所述特定對象的姿態識別結果，確定對應的所述圖像待響應的命令，以供所述圖像采集設備所在終端設備響應所述待響應的命令。

7.根據權利要求1所述的方法，其中，在判斷出所述當前幀圖像不是任一分組的第1幀圖像之后，所述方法還包括：

計算所述當前幀圖像與其所屬分組的第1幀圖像的幀間距；

根據所述幀間距，確定i和j的取值；其中，所述第i層卷積層與最后一層卷積層之間的層距與所述幀間距成反比關系，所述第j層反卷積層與輸出層之間的層距與所述幀間距成正比關系。