[發(fā)明專利]基于神經(jīng)網(wǎng)絡(luò)的旋律生成方法、裝置及存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 201710898166.3
• 申請(qǐng)日: 2017-09-28
• 公開(kāi)（公告）號(hào): CN107644630B
• 公開(kāi)（公告）日: 2020-07-28
• 發(fā)明（設(shè)計(jì)）人: 胡曉林;吳健;胡昌然
• 申請(qǐng)（專利權(quán)）人: 北京靈動(dòng)音科技有限公司
• 主分類號(hào): G10H1/00
• 分類號(hào): G10H1/00;G06N3/04;G06N3/08
• 代理公司: 北京林達(dá)劉知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11277
• 代理人: 劉新宇

本申請(qǐng)?zhí)峁┮环N基于神經(jīng)網(wǎng)絡(luò)的旋律生成方法及裝置，其中所述方法包括：獲取初始音符序列、預(yù)設(shè)時(shí)長(zhǎng)和所述預(yù)設(shè)時(shí)長(zhǎng)的初始特征，所述初始音符序列中時(shí)長(zhǎng)最小的音符的時(shí)長(zhǎng)小于所述預(yù)設(shè)時(shí)長(zhǎng)；根據(jù)所述預(yù)設(shè)時(shí)長(zhǎng)、所述初始特征和時(shí)長(zhǎng)神經(jīng)網(wǎng)絡(luò)模型，計(jì)算各預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)特征；根據(jù)計(jì)算出的各預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)特征、所述初始音符序列和音符神經(jīng)網(wǎng)絡(luò)模型，計(jì)算音符，并根據(jù)計(jì)算出的音符獲取旋律。通過(guò)提取旋律的不同時(shí)間尺度的特征，考慮了旋律在不同的時(shí)長(zhǎng)的結(jié)構(gòu)特征，在生成旋律時(shí)，通過(guò)利用訓(xùn)練完成的各類神經(jīng)網(wǎng)絡(luò)模型的協(xié)作，生成具有良好長(zhǎng)程結(jié)構(gòu)的旋律片段，提高了生成旋律的真實(shí)性，能夠保證聽(tīng)覺(jué)上的效果。

技術(shù)領(lǐng)域

本申請(qǐng)涉及深度學(xué)習(xí)領(lǐng)域，尤其涉及一種基于神經(jīng)網(wǎng)絡(luò)的旋律生成方法及裝置。

背景技術(shù)

音樂(lè)是一種重要的藝術(shù)形式，通常，音樂(lè)包涵旋律和和弦兩種成分。其中，旋律是沿著時(shí)間順序分布的集合，被廣泛認(rèn)為是音樂(lè)的最重要組成部分，具體而言，旋律是一系列音符沿時(shí)間分布的集合。其中，每個(gè)音符均包涵音高和時(shí)長(zhǎng)兩個(gè)要素，音高決定了這個(gè)音符的頻率高低，時(shí)長(zhǎng)則決定了這個(gè)音符將被彈奏多久。在傳統(tǒng)的自動(dòng)生成旋律的技術(shù)中，根據(jù)音符的音高和時(shí)長(zhǎng)進(jìn)行各種運(yùn)算后合成旋律，由于因素考慮比較單一，所生成的旋律的真實(shí)性較低，影響聽(tīng)覺(jué)上的效果。

發(fā)明內(nèi)容

有鑒于此，本申請(qǐng)?zhí)岢隽艘环N基于神經(jīng)網(wǎng)絡(luò)的旋律生成方法及裝置，提高生成旋律的真實(shí)性。

根據(jù)本申請(qǐng)實(shí)施例的第一方面，提供一種基于神經(jīng)網(wǎng)絡(luò)的旋律生成方法，包括：

獲取初始音符序列、預(yù)設(shè)時(shí)長(zhǎng)和所述預(yù)設(shè)時(shí)長(zhǎng)的初始特征，所述初始音符序列中時(shí)長(zhǎng)最小的音符的時(shí)長(zhǎng)小于所述預(yù)設(shè)時(shí)長(zhǎng)；

根據(jù)所述預(yù)設(shè)時(shí)長(zhǎng)、所述初始特征和時(shí)長(zhǎng)神經(jīng)網(wǎng)絡(luò)模型，計(jì)算各預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)特征；

根據(jù)計(jì)算出的各預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)特征、所述初始音符序列和音符神經(jīng)網(wǎng)絡(luò)模型，計(jì)算音符，并根據(jù)計(jì)算出的音符獲取旋律。

在一種可能的實(shí)現(xiàn)方式中，根據(jù)所述預(yù)設(shè)時(shí)長(zhǎng)、所述初始特征和時(shí)長(zhǎng)神經(jīng)網(wǎng)絡(luò)模型，計(jì)算各預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)特征，包括：

根據(jù)所述預(yù)設(shè)時(shí)長(zhǎng)、所述初始特征、時(shí)長(zhǎng)神經(jīng)網(wǎng)絡(luò)模型中的初始時(shí)長(zhǎng)網(wǎng)絡(luò)狀態(tài)，計(jì)算第一個(gè)預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)特征，所述初始時(shí)長(zhǎng)網(wǎng)絡(luò)狀態(tài)包括時(shí)長(zhǎng)網(wǎng)絡(luò)狀態(tài)的初始值，所述時(shí)長(zhǎng)網(wǎng)絡(luò)狀態(tài)包括時(shí)長(zhǎng)神經(jīng)網(wǎng)絡(luò)模型中的運(yùn)算的網(wǎng)絡(luò)狀態(tài)；

按照時(shí)間的先后順序，根據(jù)計(jì)算出的前一個(gè)預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)特征、時(shí)長(zhǎng)神經(jīng)網(wǎng)絡(luò)模型中的前一個(gè)預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)網(wǎng)絡(luò)狀態(tài)，依次計(jì)算當(dāng)前預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)特征，并根據(jù)計(jì)算出的當(dāng)前預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)特征，更新時(shí)長(zhǎng)神經(jīng)網(wǎng)絡(luò)模型中當(dāng)前預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)網(wǎng)絡(luò)狀態(tài)。

在一種可能的實(shí)現(xiàn)方式中，根據(jù)計(jì)算出的各預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)特征、所述初始音符序列和音符神經(jīng)網(wǎng)絡(luò)模型，計(jì)算音符，包括：

根據(jù)計(jì)算出的第一個(gè)預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)特征、初始音符序列、所述音符神經(jīng)網(wǎng)絡(luò)模型中的初始音符網(wǎng)絡(luò)狀態(tài)，計(jì)算第一個(gè)音符，所述初始音符網(wǎng)絡(luò)狀態(tài)包括音符網(wǎng)絡(luò)狀態(tài)的初始值，所述音符網(wǎng)絡(luò)狀態(tài)包括音符神經(jīng)網(wǎng)絡(luò)模型中的運(yùn)算的網(wǎng)絡(luò)狀態(tài)；

根據(jù)時(shí)間的先后順序，根據(jù)計(jì)算出的前一個(gè)音符、音符神經(jīng)網(wǎng)絡(luò)模型中的前一個(gè)音符的音符網(wǎng)絡(luò)狀態(tài)，當(dāng)前音符所在的預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)特征，計(jì)算當(dāng)前音符，并根據(jù)計(jì)算出的當(dāng)前音符，更新音符神經(jīng)網(wǎng)絡(luò)模型中當(dāng)前音符的音符網(wǎng)絡(luò)狀態(tài)。

在一種可能的實(shí)現(xiàn)方式中，所述預(yù)設(shè)時(shí)長(zhǎng)，包括：

第一預(yù)設(shè)時(shí)長(zhǎng)和第二預(yù)設(shè)時(shí)長(zhǎng)，所述第一預(yù)設(shè)時(shí)長(zhǎng)大于所述第二預(yù)設(shè)時(shí)長(zhǎng)；

所述預(yù)設(shè)時(shí)長(zhǎng)的初始特征，包括：

所述第一預(yù)設(shè)時(shí)長(zhǎng)的第一初始特征，以及所述第二預(yù)設(shè)時(shí)長(zhǎng)的第二初始特征；

根據(jù)所述預(yù)設(shè)時(shí)長(zhǎng)、所述初始特征和時(shí)長(zhǎng)神經(jīng)網(wǎng)絡(luò)模型，計(jì)算各預(yù)設(shè)時(shí)長(zhǎng)的時(shí)長(zhǎng)特征，包括：