[發明專利]一種互動音樂生成方法、裝置、智能音箱及存儲介質

在審

• 申請號: 201911341110.3
• 申請日: 2019-12-23
• 公開（公告）號: CN111737516A
• 公開（公告）日: 2020-10-02
• 發明（設計）人: 張金暉
• 申請（專利權）人: 北京沃東天駿信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F16/732
• 分類號: G06F16/732;G06F16/635;G06N3/04;G06N3/08
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

本發明實施例公開了一種互動音樂生成方法、裝置、智能音箱及存儲介質，所述方法應用于智能音箱，包括：獲取待處理視頻，提取所述待處理視頻中的圖像幀；將所述圖像幀輸入至預先訓練好的音樂生成模型中，獲得所述音樂生成模型輸出的互動音樂；將所述互動音樂進行播放。本發明實施例提供的互動音樂生成方法通過訓練音樂生成模型根據待處理視頻生成相應的互動音樂，豐富了智能音箱的互動方式，提高了智能音箱的交互性能。

技術領域

本發明實施例涉及智能家居領域，尤其涉及一種互動音樂生成方法、裝置、智能音箱及存儲介質。

背景技術

隨著智能時代的開啟，物聯網技術越來越受到大家的關注，除了技術本身的前沿性外，最重要的是實現萬物互聯互通，方便人們的生活體驗。智能音箱作為人機智能交互的典型入口，人們可以通過語音與智能音箱間實施交互來滿足人們日常生活需求，諸如聽歌、打電話、定鬧鐘、聽廣播等。最近隨著帶屏智能音箱的出現，人們除了與智能音箱間實現基本的語音交互外，還能在視覺層面上實現與智能音箱間的多模態交互。

在實現本發明的過程中，發明人發現現有技術中至少存在以下技術問題：智能帶屏音箱中除了具有普通音箱所擁有的功能外，還有在視覺上的新體驗。目前針對市場上的帶屏智能音箱給用戶在視頻方面的體驗僅僅限于通過檢索來播放用戶所需的網上視頻資源(如綜藝節目、電視劇、電影、娛樂短視頻等)。但隨著用戶對智能音箱使用次數的增加，可能會大幅降低用戶對已熟悉的功能的感興趣度，如何增加智能音箱的互動性能成為一個亟待解決的技術問題。

發明內容

本發明實施例提供了一種互動音樂生成方法、裝置、智能音箱及存儲介質，以豐富音箱的互動方式，提高音箱的交互性能。

第一方面，本發明實施例提供了一種互動音樂生成方法，應用于智能音箱，包括：

獲取待處理視頻，提取所述待處理視頻中的圖像幀；

將所述圖像幀輸入至預先訓練好的音樂生成模型中，獲得所述音樂生成模型輸出的互動音樂；

將所述互動音樂進行播放。

第二方面，本發明實施例還提供了一種互動音樂生成裝置，包括：

圖像幀獲取模塊，用于獲取待處理視頻，提取所述待處理視頻中的圖像幀；

互動音樂生成模塊，用于將所述圖像幀輸入至預先訓練好的音樂生成模型中，獲得所述音樂生成模型輸出的互動音樂；

互動音樂播放模塊，用于將所述互動音樂進行播放。

第三方面，本發明實施例還提供了一種智能音箱，所述音箱包括：

一個或多個處理器；

存儲裝置，用于存儲一個或多個程序；

當所述一個或多個程序被所述一個或多個處理器執行，使得所述一個或多個處理器實現如本發明任意實施例所提供的互動音樂生成方法。

第四方面，本發明實施例還提供了一種計算機可讀存儲介質，其上存儲有計算機程序，該程序被處理器執行時實現如本發明任意實施例所提供的互動音樂生成方法。

本發明實施例通過獲取待處理視頻，提取所述待處理視頻中的圖像幀；將所述圖像幀輸入至預先訓練好的音樂生成模型中，獲得所述音樂生成模型輸出的互動音樂；將所述互動音樂進行播放，通過訓練音樂生成模型用于根據待處理視頻生成相應的互動音樂并播放，豐富了智能音箱的互動方式，提高了智能音箱的交互性能。

附圖說明

圖1a是本發明實施例一所提供的一種互動音樂生成方法的流程圖；

圖1b是本發明實施例一所提供的一種互動音樂生成方法的流程示意圖；