[發明專利]一種鋼琴演奏的視頻特征提取方法及系統在審
| 申請號： | 201611019710.4 | 申請日： | 2016-11-18 |
| 公開（公告）號： | CN108073867A | 公開（公告）日： | 2018-05-25 |
| 發明（設計）人： | 王輝 | 申請（專利權）人： | 北京酷我科技有限公司 |
| 主分類號： | G06K9/00 | 分類號： | G06K9/00 |
| 代理公司： | 北京億騰知識產權代理事務所 11309 | 代理人： | 陳霽 |
| 地址： | 100084 北京市海淀區農大*** | 國省代碼： | 北京;11 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 鋼琴演奏 視頻特征提取 演奏 按鍵信息 視頻特征信息 鋼琴彈奏 視頻特征 按下 視頻 琴鍵 快速提取 琴鍵位置 深度相機 時長 逐幀 錄制 圖片 記錄 分析 | ||
1.一種鋼琴演奏的視頻特征提取方法，其特征在于，包括以下步驟：
利用深度相機錄制演奏者參照曲譜進行鋼琴彈奏的視頻；
逐幀提取所述視頻中的所有圖片，從每幀圖片中獲取演奏者在進行鋼琴彈奏時的按鍵信息，所述按鍵信息包括：演奏者的手指所按下的琴鍵位置，以及該琴鍵被按下時的深度和保持的時長；
根據所述按鍵信息提取視頻特征信息，并將所述視頻特征信息記錄在所述曲譜對應的視頻特征文件中。
2.根據權利要求1所述的方法，其特征在于：所述視頻特征信息包括：演奏者彈奏的每個音符的音高和時值、按鍵力度、彈奏方式以及節奏的快慢中的一種或多種信息。
3.根據權利要求1所述的方法，其特征在于：所述演奏者的手指按鍵時的琴鍵位置通過以下步驟獲取：
將提取到的圖片中的鋼琴鍵盤區域和手的位置進行對比，得到演奏者的手指按鍵時的琴鍵位置。
4.根據權利要求1所述的方法，其特征在于：所述琴鍵被按下時的保持的時長通過以下步驟獲取：
將逐幀提取的多張圖片進行對比，獲得琴鍵被按下時的保持的時長。
5.根據權利要求1所述的方法，其特征在于：所述琴鍵被按下時的深度由所述深度相機計算獲得。
6.一種鋼琴演奏的視頻特征提取系統，其特征在于，包括：
第一獲取模塊，用于利用深度相機錄制演奏者參照曲譜進行鋼琴彈奏的視頻；
第二獲取模塊，用于逐幀提取所述視頻中的所有圖片，從每幀圖片中獲取演奏者在進行鋼琴彈奏時的按鍵信息，所述按鍵信息包括：演奏者的手指所按下的琴鍵位置，以及該琴鍵被按下時的深度和保持的時長；
處理模塊，用于根據所述按鍵信息提取視頻特征信息，并將所述視頻特征信息記錄在所述曲譜對應的視頻特征文件中。
7.根據權利要求6所述的系統，其特征在于：所述視頻特征信息包括：演奏者彈奏的每個音符的音高和時值、按鍵力度、彈奏方式以及節奏的快慢中的一種或多種信息。
8.根據權利要求6所述的系統，其特征在于：所述第二獲取模塊，具體用于：
將提取到的圖片中的鋼琴鍵盤區域和手的位置進行對比，得到演奏者的手指按鍵時的琴鍵位置。
9.根據權利要求6所述的系統，其特征在于：所述第二獲取模塊，具體用于：
將逐幀提取的多張圖片進行對比，獲得琴鍵被按下時的保持的時長。
10.根據權利要求6所述的系統，其特征在于：所述琴鍵被按下時的深度由所述深度相機參數獲得。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于北京酷我科技有限公司，未經北京酷我科技有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/201611019710.4/1.html，轉載請聲明來源鉆瓜專利網。
