[發明專利]一種智能琴譜翻閱方法

在審

• 申請號: 202211045847.2
• 申請日: 2022-08-30
• 公開（公告）號: CN115407877A
• 公開（公告）日: 2022-11-29
• 發明（設計）人: 朱正陽;陶彬彬;陳田;宋明雨;李庚龍
• 申請（專利權）人: 皖江工學院
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F16/51;G06V40/16;G06V40/18;G06V40/20
• 代理公司: 常州市科誼專利代理事務所 32225
• 代理人: 芮雪萍

本發明公開了一種智能琴譜翻閱方法，它包括：步驟S1、建立演奏者專屬ID，攝像頭在所述專屬ID下采集演奏者的眼部人臉特征圖像以及演奏者的擺頭動作特征圖像各20張，并保存在數據庫中；步驟S2、演奏前，演奏者登錄專屬ID，登錄后，即可顯示保存的20張眼部人臉特征圖像及擺頭動作特征圖像；步驟S3、攝像頭拍攝演奏者人臉，對演奏者人臉進行圖像采集，根據采集到的演奏者人臉圖像，提取出演奏者人臉圖像在1秒內的N張幀圖像；步驟S4、將演奏者人臉圖像在1秒內的N張幀圖像，與預存的演奏者的眼部人臉特征圖像以及演奏者的擺頭動作特征圖像進行對比。本發明提供一種智能琴譜翻閱方法，可以實現通過眼睛和頭部的動作來自動翻譜。

技術領域

本發明涉及一種智能琴譜翻閱方法。

背景技術

目前，在現有技術中，演奏樂器(如：鋼琴、管弦類樂器)時大多需要人工手動翻閱琴譜，較為麻煩，還容易打亂演奏者的節奏。隨著自動翻閱裝置的出現，很多演奏者都會采用自動翻頁來輔助演奏，但傳統的自動翻頁方法一般需要演奏者借助自動翻閱裝置上的按鍵、踏板等機構來控制翻譜，在演奏者快速且緊張的演奏過程中，難免會對演奏產生影響，進而導致現場演奏時出現突發狀況，影響非常不好。

發明內容

本發明所要解決的技術問題是，克服現有技術的不足，提供一種智能琴譜翻閱方法，可以實現通過眼睛和頭部的動作來自動翻譜。

為了解決上述技術問題，本發明的技術方案是：

一種智能琴譜翻閱方法，它包括：

步驟S1、建立演奏者專屬ID，攝像頭在所述專屬ID下采集演奏者的眼部人臉特征圖像以及演奏者的擺頭動作特征圖像，并保存在數據庫中；

步驟S2、演奏前，演奏者登錄專屬ID，登錄后，顯示保存的眼部人臉特征圖像及擺頭動作特征圖像；

步驟S3、攝像頭拍攝演奏者人臉，對演奏者人臉進行圖像采集，根據采集到的演奏者人臉圖像，提取出演奏者人臉圖像在1秒內的N張幀圖像；

步驟S4、將演奏者人臉圖像在1秒內的N張幀圖像，與預存的演奏者的眼部人臉特征圖像以及演奏者的擺頭動作特征圖像進行對比，若提取的1秒內的N張幀圖像與預存的演奏者的眼部人臉特征圖像以及演奏者的擺頭動作特征圖像的相似度均達到要求，則判定演奏者做出了擺頭及閉眼動作；

步驟S5、根據演奏者做出的擺頭及閉眼動作，進行相應的翻譜動作。

進一步，所述步驟S3中，攝像頭拍攝演奏者人臉，對演奏者人臉進行圖像采集，根據采集到的演奏者人臉圖像，提取出演奏者人臉圖像在1秒內的N張幀圖像，具體包括：

步驟S31、攝像頭拍攝演奏者人臉，對演奏者人臉進行圖像采集；

步驟S32、對演奏者人臉圖像區域進行眼部圖像區域識別及頭部動作特征識別，得到左右兩只眼睛的眼部圖像區域及頭部圖像區域；

步驟S33、確定左右兩只眼睛的眼部圖像區域及頭部圖像區域后，對采集到的演奏者人臉圖像進行圖像區域采集提取，提取出演奏者人臉圖像在1秒內的N張幀圖像。

進一步，所述步驟S31中，攝像頭拍攝演奏者人臉，對演奏者人臉進行圖像采集，具體包括：

攝像頭拍攝演奏者人臉圖像，利用MeanShift算法對演奏者人臉圖像采集提取，進行人臉位置檢測和關鍵點檢測。

進一步，所述步驟S32中，對演奏者人臉圖像區域進行眼部圖像區域識別及頭部動作特征識別，得到左右兩只眼睛的眼部圖像區域及頭部圖像區域，具體包括：

輸入演奏者人臉圖像，判斷圖像中是否為演奏者人臉；