[發明專利]人體連續動作相似性評價方法及評價裝置

在審

• 申請號: 202011190897.0
• 申請日: 2020-10-30
• 公開（公告）號: CN112257642A
• 公開（公告）日: 2021-01-22
• 發明（設計）人: 楊躒;張文;張海波;劉豐凱;許楠
• 申請（專利權）人: 上海龐勃特科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62
• 代理公司: 北京科石知識產權代理有限公司 11595
• 代理人: 李艷霞

本申請提供了一種人體連續動作相似性評價方法及評價裝置，評價方法包括：獲取第一人體運動時的彩色圖像序列和深度圖像序列；獲取第一人體關鍵點相對相機坐標系的三維坐標；截取第一人體關鍵點的坐標序列并構成模板動作庫；獲取第二人體運動時的一幀彩色圖像和深度圖像；獲取第二人體關鍵點相對相機坐標系的三維坐標；獲取從模板動作庫中選取的待對比的模板動作序列的時間長度；將截取的與模板動作序列的時間長度相同且截止時間為當前輸入的第二人體關鍵點坐標序列最新時間的第二人體關鍵點坐標序列作為輸入動作序列；對輸入動作和模板動作的相似性進行評價。本申請能夠對用戶輸入的連續性動作與模板動作之間的相似性進行實時、動態評價。

技術領域

本申請屬于人體運動分析技術領域，具體涉及一種人體連續動作相似性評價方法及評價裝置。

背景技術

隨著科學技術的進步和人類生活水平的提高，人們對各類體育運動的需求日益增長。在運動過程中，人們不只是滿足于單純的運動量，而是更在意自身動作與模板動作的相似性。然而，由于時間、場地和人數的限制，人們往往難以隨時獲得教練的動作指導。另外，即使是通過觀看教學視頻進行學習，也會因為理解能力的差異和針對性教學的欠缺，導致人們練習時的動作與模板動作存在較大差異。現有技術中存在輸入動作與模板動作的差異性的靜態對比，還不能對輸入動作與模板動作的差異性進行動態對比。

發明內容

為至少在一定程度上克服相關技術中存在的問題，本申請提供了一種人體連續動作相似性評價方法及評價裝置。

根據本申請實施例的第一方面，本申請提供了一種人體連續動作相似性評價方法，其包括以下步驟：

搭建模板動作庫，其具體過程為：

獲取第一人體運動時的彩色圖像序列和深度圖像序列；

獲取第一人體關鍵點相對相機坐標系的三維坐標；

截取第一人體關鍵點的坐標序列并將其作為待對比的模板動作序列，模板動作序列構成模板動作庫；

獲取輸入動作序列，其具體過程為：

獲取第二人體運動時的一幀彩色圖像和深度圖像；

獲取第二人體關鍵點相對相機坐標系的三維坐標；

從模板動作庫中選取待對比的模板動作序列，并獲取該模板動作序列的時間長度；

截取與模板動作序列的時間長度相同且截止時間為當前輸入的第二人體關鍵點坐標序列最新時間的第二人體關鍵點坐標序列，并將其作為輸入動作序列；

對輸入動作和模板動作的相似性進行實時評價，其具體過程：

分別提取模板動作序列的特征和輸入動作序列的特征；

分別對模板動作序列的特征和輸入動作序列的特征進行標準化處理；

計算輸入動作序列與模板動作序列中各對應特征的距離值；

根據各對應特征的距離值計算得到綜合相似性評價值；

根據綜合相似性評價值得到最終的相似性評價結果。

上述人體連續動作相似性評價方法中，所述第一人體關鍵點和第二人體關鍵點均包括兩肩中心、頭、右肩、右肘、右腕、左肩、左肘、左腕、右髖、右膝、右踝、左髖、左膝和左踝。

上述人體連續動作相似性評價方法中，所述獲取第一人體關鍵點相對相機坐標系的三維坐標的過程為：

采用深度學習方法獲得第一人體關鍵點在各彩色圖像上的像素坐標；

利用彩色圖像與深度圖像的映射關系完成第一人體關鍵點的三維重建，得到第一人體關鍵點相對相機坐標系的三維坐標；