[發明專利]視頻生成方法、裝置、電子設備及存儲介質

在審

• 申請號: 202310020838.6
• 申請日: 2023-01-06
• 公開（公告）號: CN115955585A
• 公開（公告）日: 2023-04-11
• 發明（設計）人: 辜心;陳光;王欣堯;袁野;王宇飛;文瓏銀;胡子建
• 申請（專利權）人: 北京字跳網絡技術有限公司;臉萌有限公司
• 主分類號: H04N21/234
• 分類號: H04N21/234;H04N21/233;H04N21/2368;H04N21/845
• 代理公司: 上海光柵知識產權代理有限公司 31340
• 代理人: 王沛懿;關浩

1.一種視頻生成方法，其特征在于，包括：

獲取原始視頻，并基于所述原始視頻中的視頻內容，切分所述原始視頻，得到至少兩個視頻片段；

生成所述視頻片段對應的解說語音，所述解說語音用于描述所述視頻片段的畫面內容；

根據所述視頻片段和對應的解說語音，生成目標視頻。

2.根據權利要求1所述的方法，其特征在于，所述生成所述視頻片段對應的解說語音，包括：

對所述視頻片段的進行內容識別，得到表征所述視頻片段的畫面內容的內容信息；

根據所述內容信息生成對應的解說文本；

根據所述解說文本，生成所述解說語音。

3.根據權利要求2所述的方法，其特征在于，所述根據所述解說文本，生成所述解說語音，包括：

根據所述視頻片段的內容信息，確定所述解說語音的目標語速；

基于所述目標語速，生成所述解說語音。

4.根據權利要求2所述的方法，其特征在于，所述方法還包括：

獲取所述視頻片段的視頻語音，并提取所述視頻語音的第一語義特征；

獲取所述內容信息的第二語義特征，并對比所述第二語義特征與所述第一語義特征的特征相似度；

根據所述內容信息生成對應的解說文本，包括：

若所述特征相似度小于相似度閾值，則根據所述第二語義特征，生成所述解說文本。

5.根據權利要求2所述的方法，其特征在于，所述內容信息中至少包括第一信息和第二信息，其中，所述第一信息表征所述視頻片段中的目標人物，所述第二信息表征所述目標人物對應的目標動作；

根據所述內容信息生成對應的解說文本，包括：

根據所述第一信息和所述第二信息，生成至少一組子文本，所述子文本用于表征對應的播放時刻下，所述視頻片段中的目標人物和對應的目標動作；

根據各所述子文本和對應的播放時刻，生成所述解說文本。

6.根據權利要求1所述的方法，其特征在于，所述方法還包括：

獲取所述視頻片段中的視頻語音；

根據所述視頻語音的第一播放時間段，確定所述解說語音對應的第二播放時間段；

所述根據所述視頻片段和對應的解說語音，生成目標視頻，包括；

根據所述第二播放時間段，將所述解說語音插入所述原始視頻的目標位置，生成所述目標視頻。

7.根據權利要求1所述的方法，其特征在于，所述基于所述原始視頻中的視頻內容，切分所述原始視頻，得到至少兩個視頻片段，包括：

獲取所述原始視頻中的目標視頻幀和對應的視頻字幕；

根據所述目標視頻幀和對應的視頻字幕，確定至少兩個視頻事件；

基于所述視頻事件對所述原始視頻進行切分，得到與所述視頻事件對應的視頻片段。

8.一種視頻生成裝置，其特征在于，包括：

獲取模塊，用于獲取原始視頻，并基于所述原始視頻中的視頻內容，切分所述原始視頻，得到至少兩個視頻片段；

解說模塊，用于生成所述視頻片段對應的解說語音，所述解說語音用于描述所述視頻片段的畫面內容；

生成模塊，用于根據所述視頻片段和對應的解說語音，生成目標視頻。

9.一種電子設備，其特征在于，包括：處理器，以及與所述處理器通信連接的存儲器；

所述存儲器存儲計算機執行指令；

所述處理器執行所述存儲器存儲的計算機執行指令，以實現如權利要求1至7中任一項所述的方法。

10.一種計算機可讀存儲介質，其特征在于，所述計算機可讀存儲介質中存儲有計算機執行指令，當處理器執行所述計算機執行指令時，實現如權利要求1至7任一項所述的視頻生成方法。

11.一種計算機程序產品，其特征在于，包括計算機程序，該計算機程序被處理器執行時實現權利要求1至7中任一項所述的視頻生成方法。