[發明專利]漫畫生成方法、裝置、電子設備和存儲介質

在審

• 申請號: 202110732832.2
• 申請日: 2021-06-29
• 公開（公告）號: CN113393558A
• 公開（公告）日: 2021-09-14
• 發明（設計）人: 倪敏垚
• 申請（專利權）人: 維沃軟件技術有限公司
• 主分類號: G06T13/00
• 分類號: G06T13/00;G06K9/62;G06T7/269;G06T7/40
• 代理公司: 北京東方億思知識產權代理有限責任公司 11258
• 代理人: 桂艷球

1.一種漫畫生成方法，其特征在于，所述方法包括：

根據第一視頻的內容，對所述第一視頻進行劃分，得到多個第二視頻；一個所述第二視頻中的各幀視頻幀的內容相似度滿足預設相似度條件；

針對每個所述第二視頻，基于所述第二視頻中的每一幀視頻幀的圖像幀信息，確定所述第二視頻的目標轉換視頻幀；

針對每個所述目標轉換視頻幀，將所述目標轉換視頻幀轉換為漫畫圖像，得到每個所述第二視頻對應的漫畫圖像；

基于各所述漫畫圖像，生成所述第一視頻對應的漫畫。

2.根據權利要求1所述的方法，其特征在于，所述基于所述第二視頻中的每一幀圖像的圖像幀信息，確定所述第二視頻的目標轉換視頻幀，包括：

從所述第二視頻的視頻幀中，篩選出圖像幀信息對應的分值滿足預設條件的準目標轉換視頻幀；

對所述準目標轉換視頻幀進行清晰度處理，得到所述目標轉換視頻幀。

3.根據權利要求2所述的方法，其特征在于，所述對所述準目標轉換視頻幀進行清晰度處理，得到所述目標轉換視頻幀，包括：

獲取所述準目標轉換視頻幀的參考視頻幀；其中，所述參考視頻幀包括第一視頻幀和第二視頻幀中的至少一項；所述第一視頻幀為所述第二視頻中位于所述準目標轉換視頻幀之前的M幀視頻幀；所述第二視頻幀為所述第二視頻中位于所述準目標轉換視頻幀之后的N幀視頻幀，M和N均為正整數；

確定所述參考視頻幀到所述準目標轉換視頻幀的光流圖；

基于所述光流圖，將所述參考視頻幀與所述準目標轉換視頻幀對齊，得到與所述參考視頻幀對應的目標參考視頻幀；

獲取所述目標參考視頻幀的第一紋理信息，以及所述準目標轉換視頻幀的第二紋理信息；

將所述第一紋理信息疊加到所述第二紋理信息上，得到所述目標轉換視頻幀。

4.根據權利要求1所述的方法，其特征在于，在所述基于各所述漫畫圖像，生成所述第一視頻對應的漫畫之前，所述方法還包括：

確定各所述第二視頻對應的描述信息，所述描述信息用于描述所述第二視頻所對應的場景和/或動作；

針對每個所述漫畫圖像，基于所述描述信息，從所述漫畫圖像中提取與所述描述信息對應的第一圖像區域；

所述基于各所述漫畫圖像，生成所述第一視頻對應的漫畫，包括：

基于各所述漫畫圖像中的所述第一圖像區域，生成所述第一視頻對應的漫畫。

5.根據權利要求4所述的方法，其特征在于，在所述基于各所述漫畫圖像，生成所述第一視頻對應的漫畫之前，所述方法還包括：

針對每個所述第二視頻，獲取與所述第二視頻的語音信息對應的文本信息；

所述基于各所述漫畫圖像，生成所述第一視頻對應的漫畫，包括：

基于各所述漫畫圖像的所述第一圖像區域和所述文本信息，生成所述第一視頻對應的漫畫。

6.根據權利要求1所述的方法，其特征在于，所述基于各所述漫畫圖像，生成所述第一視頻對應的漫畫，包括：

接收用戶對第一目標漫畫圖像的第一輸入，所述第一輸入用于對所述第一目標漫畫圖像進行排版；

響應于所述第一輸入，生成目標排版圖像；

基于目標排版圖像，生成所述第一視頻對應的漫畫；

其中，所述第一目標漫畫圖像為各所述漫畫圖像中的至少一項。

7.一種漫畫生成裝置，其特征在于，所述裝置包括：

第二視頻生成模塊，用于根據第一視頻的內容，對所述第一視頻進行劃分，得到多個第二視頻；一個所述第二視頻中的各幀視頻幀的內容相似度滿足預設相似度條件；

目標轉換視頻幀確定模塊，用于針對每個所述第二視頻，基于所述第二視頻中的每一幀視頻幀的圖像幀信息，確定所述第二視頻的目標轉換視頻幀；

漫畫圖像確定模塊，用于針對每個所述目標轉換視頻幀，將所述目標轉換視頻幀轉換為漫畫圖像，得到每個所述第二視頻對應的漫畫圖像；

漫畫生成模塊，用于基于各所述漫畫圖像，生成所述第一視頻對應的漫畫。