[發明專利]一種基于圖像和音頻的樂譜雙重識別系統

有效

• 申請號: 202011420871.0
• 申請日: 2020-12-08
• 公開（公告）號: CN113076967B
• 公開（公告）日: 2022-09-23
• 發明（設計）人: 袁存鼎;秦興辰;黃煌
• 申請（專利權）人: 無錫樂騏科技股份有限公司
• 主分類號: G06V10/75
• 分類號: G06V10/75;G06V10/764;G10H1/00
• 代理公司: 無錫智麥知識產權代理事務所(普通合伙) 32492
• 代理人: 王普慧

1.一種基于圖像和音頻的樂譜雙重識別系統，其特征在于，包括：

圖像輸入模塊，用于接收輸入樂譜圖像并傳送至圖像識別模塊；圖像識別模塊，所述圖像識別模塊用于通過識別圖像輸入模塊的原始位圖樂譜的信息生成識別圖像并獲得對應的第一音符信息；所述第一音符信息包括速度記號、音符、小節線、反復號、結束號、拍號和弱起；

樂理解析模塊，所述樂理解析模塊用于將第一音符信息通過樂理分析進行矢量存儲；

音頻識別模塊，所述音頻識別模塊用于通過獲取原始音頻信息得到原始位圖樂譜對應的第二音符信息，第二音符信息包括音符和對應的音符彈奏時長；將音頻識別模塊和圖像識別模塊相連接，從圖像識別模塊獲得速度記號后，將速度記號信息傳送至音頻識別模塊，從而根據速度記號信息和彈奏音符對應的時長信息生成與之相匹配的矢量化音符信息；

校準模塊，所述校準模塊用于將圖像識別的第一音符信息與音頻識別的第二音符信息進行校準，使生成對應相同的音符信息并輸出至樂譜輸出模塊；所述校準模塊包括匹配子模塊和提示子模塊，所述匹配子模塊用于將所述第一音符信息和第二音符信息進行匹配，將匹配相同的音符信息輸入至樂譜輸出模塊，匹配不同的信息輸入至提示子模塊，所述提示子模塊用于用戶核對音符信息；

樂譜輸出模塊，所述樂譜輸出模塊用于將所述校準模塊得到的音符信息對應的第一音符信息按照矢量圖的方式輸出。

2.根據權利要求1所述的一種基于圖像和音頻的樂譜雙重識別系統，其特征在于：所述圖像輸入模塊設置有攝像頭或掃描儀，用于通過拍攝或掃描獲得樂譜的原始位圖。

3.根據權利要求2所述的一種基于圖像和音頻的樂譜雙重識別系統，其特征在于：所述第一音符信息包括速度記號、音符、小節線、反復號、結束號、拍號和弱起，所述第二音符信息包括音符和對應的音符彈奏時長。

4.根據權利要求3所述的一種基于圖像和音頻的樂譜雙重識別系統，其特征在于：所述第二音符信息通過第一音符信息的速度記號、拍號生成對應的對比圖像。

5.根據權利要求1所述的一種基于圖像和音頻的樂譜雙重識別系統，其特征在于：所述識別圖像僅包括音符，不包括譜線、小節線、反復號、結束號、拍號和弱起。

6.根據權利要求1所述 的一種基于圖像和音頻的樂譜雙重識別系統，其特征在于：所屬樂譜輸出模塊設置有電子顯示屏，用于展示輸出的樂譜。