[發明專利]一種交互式教學方法和系統

在審

• 申請號: 202010339136.0
• 申請日: 2020-04-26
• 公開（公告）號: CN111553260A
• 公開（公告）日: 2020-08-18
• 發明（設計）人: 張向東;王劍龍
• 申請（專利權）人: 蘇州繆斯談談科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06N3/04;G06N3/08;G09B15/02
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發明公開了一種交互式教學方法和系統。所述交互式教學方法采集彈奏的音頻信號；將彈奏的音頻信號的音符序列和標準樂譜的音符序列進行匹配，并將匹配結果進行顯示；若匹配結果為正確，用戶繼續彈奏；否則，執行唱譜流程，所述唱譜流程包括：采集用戶唱譜的音頻信號；將唱譜的音頻信號的唱譜內容與標準樂譜的音符序列進行匹配，并將匹配結果進行顯示；若匹配結果為正確，用戶進行彈奏。所述交互式教學方法和系統，在用戶學習樂器的過程中使用這種方式做樂器彈奏之前的樂譜內容認識校正和彈奏后錯誤內容的矯正，提高用戶對樂器學習的效率。

技術領域

本發明涉及一種交互式教學方法和系統。

背景技術

在樂器學習時，首先需要學生對樂理知識和五線譜有一定的認識，老師在教學過程中普遍會讓學生先唱譜，唱正確后再進行樂器彈奏練習，在彈奏出現錯誤時，也會讓學生先通過唱譜的方式糾正學生對樂譜的認識后再糾正樂器彈奏錯誤。這種大量標準化重復練習，更多的依賴人工糾錯，需要耗費大量時間和精力，且不能完全避免疏漏。目前，隨著語音識別技術和音樂信號識別技術的發展，使通過語音準確獲取樂譜唱名和通過音樂信號準確獲取音高/起止之間/力度等信息成為可能，人們需要一種可以不依賴于人工糾錯實現音樂練習的方法。

發明內容

本發明的目的是提供一種交互式教學方法和系統，增加用戶對樂譜的認識，提高學習效率。

為了解決上述技術問題，本發明的技術方案是：

一種交互式教學方法，包括：

采集彈奏的音頻信號；

將彈奏的音頻信號的音符序列和標準樂譜的音符序列進行匹配，并將匹配結果進行顯示；

若匹配結果為正確，用戶繼續彈奏；

否則，執行唱譜流程，所述唱譜流程包括：

采集用戶唱譜的音頻信號；

將唱譜的音頻信號的唱譜內容與標準樂譜的音符序列進行匹配，并將匹配結果進行顯示；

若匹配結果為正確，用戶進行彈奏。

作為優選，所述將唱譜的音頻信號的唱譜內容與標準樂譜的音符序列進行匹配，還包括，若匹配結果為錯誤，繼續進行唱譜流程。

作為優選，所述將唱譜的音頻信號的唱譜內容與標準樂譜的音符序列進行匹配，包括，對于單音的情況，采用單獨識別；對于多音的情況，采用單獨識別，或者由高到低識別。

作為優選，所述單獨識別，包括，將唱譜的唱譜內容的唱名和起止時間直接與標準樂譜的音符序列的唱名和起止時間做匹配。

作為優選，所述采用由高到低識別，包括對音高進行由高到低識別。

作為優選，對于多音的情況，采用由高到低識別，從標準樂譜中獲取唱名時也要按照由高到底的規則獲取，并且相應修改對應唱名的起止時間。

作為優選，所述將唱譜的音頻信號的唱譜內容與標準樂譜的音符序列進行匹配，包括，利用語音識別技術或單音音高識別，識別唱譜的音頻信號中的唱譜內容，將唱譜的音頻信號的唱譜內容與標準樂譜的音符序列進行匹配。

作為優選，所述將匹配結果進行顯示，包括，將匹配成功的音符和匹配不成功的音符進行區別顯示。

作為優選，匹配成功的音符進行染色顯示，或者做標記顯示。

作為優選，在用戶彈奏之前，還包括所述唱譜流程。

作為優選，所述將彈奏的音頻信號的音符序列與標準樂譜的音符序列進行匹配，包括，利用深度神經網絡模型識別彈奏的音頻信號中的音符序列，將彈奏的音頻信號的音符序列與標準樂譜的音符序列進行匹配。

本發明還公開了一種交互式教學系統，包括：