[發明專利]一種基于詩歌自動化作曲的方法及音頻合成裝置

在審

• 申請號: 202110491659.1
• 申請日: 2021-05-06
• 公開（公告）號: CN113192473A
• 公開（公告）日: 2021-07-30
• 發明（設計）人: 尹學淵;楊杰;陳洪宇;江天宇
• 申請（專利權）人: 成都潛在人工智能科技有限公司
• 主分類號: G10H1/00
• 分類號: G10H1/00
• 代理公司: 成都睿道專利代理事務所(普通合伙) 51217
• 代理人: 賀理興

本發明提供了一種基于詩歌自動化作曲的方法，包括如下步驟：獲取待合成的目標詩歌的細粒度屬性信息；基于細粒度屬性信息或其與輸入的音頻效果的結合調用預構建的旋律數據庫內對應的節奏型、調式調性以及和聲，利用和聲進行和對應的節奏型生成旋律，并保存為旋律midi文件；基于細粒度屬性信息、旋律midi文件以及和聲進行，調用預構建的伴奏數據庫，生成對應的伴奏樂譜并保存為伴奏midi文件；將旋律midi文件輸入基于深度學習的fastspeech模型中進行處理，生成干聲音頻文件；對伴奏midi文件進行波形拼接，得到伴奏音頻文件；對干聲音頻文件和伴奏音頻文件進行混音處理，合成音樂作品。本發明確保用戶在交互式操作下，能夠簡便的完成音樂創作，降低了音樂創作的門檻。

技術領域

本發明涉及計算機技術領域，具體而言，涉及一種基于詩歌自動化作 曲的方法及音頻合成裝置。

背景技術

隨著中國發展強大，中華文化漸漸地被外國人所了解，特別是其中的 古代文化，令很多外國人，特別是外國研究人員所著迷，其中的唐詩宋詞， 用短短的幾行有限的字，就能充分表述了人們的意境，讓人感嘆。

且如今隨著人工智能和音樂教育領域需求的發展，特別是在音樂教育 編創應用中，教材的設計和內容非常清晰，但在實際的教學過程中發現， 學生在編創環節出現許多問題，比如：旋律線條走向的模糊，節奏與節拍 概念的混淆，音樂創作中調式調性與情緒表達的偏離，大多數存在“紙上 談兵”的問題，不能直觀的參與音樂編創的過程。

因此，如何將國學經典唐詩宋詞作為歌詞原型，以高用戶參與度的方 式進行作曲是目前亟需解決的問題。

發明內容

本發明旨在解決現有技術中如何將國學經典唐詩宋詞作為歌詞原型， 以高用戶參與度的方式進行作曲的問題，以唐詩宋詞作為歌詞原型，利用 作曲規則和深度學習模型對詩詞進行曲式結構劃分和情緒分析，用戶利用 三種輸入的方式進行對詩詞進行逐句的創作，并支持自定義修改，在生成 滿意旋律的情況下，為其創作伴奏、合成干聲、混音等。確保了用戶在交 互式操作下，能夠簡便的完成音樂創作和后期合成的整個過程，大大降低了音樂創作的門檻，體驗一站式交互式作曲的樂趣。

本發明的實施例通過以下技術方案實現：一種基于詩歌自動化作曲的 方法，包括如下步驟：

S1.獲取待合成的目標詩歌的細粒度屬性信息；

S2.基于所述細粒度屬性信息或其與輸入的音頻效果的結合調用預構 建的旋律數據庫內對應的節奏型、調式調性以及和聲，利用和聲進行和對 應的節奏型生成旋律，并保存為旋律midi文件；

S3.基于所述細粒度屬性信息、旋律midi文件以及和聲進行，調用預 構建的伴奏數據庫，生成對應的伴奏樂譜并保存為伴奏midi文件；

S4.將所述旋律midi文件輸入基于深度學習的fastspeech模型中進行 處理，生成干聲音頻文件；

S5.對所述伴奏midi文件進行波形拼接，得到伴奏音頻文件；

S6.對所述干聲音頻文件和伴奏音頻文件進行混音處理，合成音樂作 品。

根據一種優選實施方式，所述細粒度信息包括但不限于曲式結構和情 緒維度。

根據一種優選實施方式，步驟S1具體包括：

S11.對目標詩歌進行段落劃分，確定曲式結構；

S12.將目標詩歌輸入預訓練的深度學習模型中進行處理，獲取目標詩 歌的情緒維度。

根據一種優選實施方式，步驟S2之前還包括：采用包括但不限于畫筆 輸入或哼唱輸入的方式獲取音頻效果，其中，

畫筆輸入的方式為：獲取用戶通過畫筆所輸入的線條并對線條進行解 析，獲取音高關系；