[發明專利]動作評分方法、裝置及可讀存儲介質

有效

• 申請號: 202011589442.6
• 申請日: 2020-12-29
• 公開（公告）號: CN112597933B
• 公開（公告）日: 2023-10-20
• 發明（設計）人: 張曉飛;徐廷輝;金煒;蓋之慧;秦菊
• 申請（專利權）人: 咪咕互動娛樂有限公司;咪咕文化科技有限公司;中國移動通信集團有限公司
• 主分類號: G06V40/10
• 分類號: G06V40/10;G06V10/46;G06F16/36;G06N3/04;G06N3/08;G06Q10/0639;G06V10/82
• 代理公司: 北京銀龍知識產權代理有限公司 11243
• 代理人: 許靜;曹娜

1.一種動作評分方法，其特征在于，包括：

基于參照動作數據，生成用戶動作序列，所述參照動作數據中包括：按照預設規則形成的參照動作序列；

將所述用戶動作序列與所述參照動作數據中的參照動作序列進行語義匹配，獲取語義匹配結果；

基于所述語義匹配結果，輸出動作評分結果。

2.根據權利要求1所述的動作評分方法，其特征在于，所述基于參照動作數據，生成用戶動作序列，包括：

基于參照動作數據中的構成參照動作序列的參照關鍵點，提取用戶圖像幀中的關鍵點信息；

根據所述關鍵點信息，生成用戶動作序列。

3.根據權利要求2所述的動作評分方法，其特征在于，所述根據所述關鍵點信息，生成用戶動作序列，包括：

根據所述關鍵點信息，確定用戶圖像幀中的用戶姿態信息，所述用戶姿態信息包括至少一個部位，所述部位包括至少一個關鍵點；

根據所述用戶姿態信息，確定用戶動作序列，所述用戶動作序列包括多個用戶姿態的排列關系。

4.根據權利要求1所述的動作評分方法，其特征在于，所述將所述用戶動作序列與所述參照動作數據中的參照動作序列進行語義匹配，獲取語義匹配結果，包括：

確定所述用戶動作序列對應的動作語義；

遍歷參照動作數據中的參照動作序列，確定所述參照動作序列中是否存在與所述動作語義匹配的關系路徑，獲取語義匹配結果；

其中，所述關系路徑為同一動作中的至少兩個姿態間的排列關系。

5.根據權利要求4所述的動作評分方法，其特征在于，所述基于所述語義匹配結果，輸出動作評分結果，包括：

若所述語義匹配結果為參照動作序列中存在與所述動作語義匹配的關系路徑，則對所述動作語義對應的用戶動作進行評分，并輸出動作評分結果。

6.根據權利要求5所述的動作評分方法，其特征在于，所述對所述動作語義對應的用戶動作進行評分，并輸出動作評分結果，包括：

根據所述動作語義，確定用于進行評分的目標姿態信息；

根據所述目標姿態信息，對所述動作語義對應的用戶動作進行評分，并輸出動作評分結果。

7.根據權利要求1所述的動作評分方法，其特征在于，所述參照動作數據的獲取方式，包括：

在基于Python及MobileNet神經網絡模型的環境下，根據實時輸入的來源于參照動作的視頻數據，生成參照關鍵點信息；

根據運動姿態特征，由所述參照關鍵點信息確定部位語義候選集，所述部位語義候選集包括：參照關鍵點組成的部位和部位狀態，所述部位狀態由參照關鍵點之間的角度確定；

根據所述部位語義候選集，生成參照動作數據；

其中，所述參照動作數據的實體包括：部位、姿態和動作，所述實體間的語義關系包括：多個部位構成姿態以及多個姿態構成動作。

8.根據權利要求1所述的動作評分方法，其特征在于，在所述基于所述語義匹配結果，輸出動作評分結果之后，還包括：

根據每個動作的動作評分結果，確定用戶連續動作的得分。

9.一種動作評分裝置，其特征在于，包括：處理器、存儲器及存儲在所述存儲器上并可在所述處理器上運行的計算機程序，所述計算機程序被所述處理器執行時實現如權利要求1至8中任一項所述的動作評分方法的步驟。

10.一種可讀存儲介質，其特征在于，所述可讀存儲介質上存儲有計算機程序，所述計算機程序被處理器執行時實現如權利要求1至8中任一項所述的動作評分方法的步驟。