[發明專利]一種視頻海報自動生成方法

有效

• 申請號: 202010628371.X
• 申請日: 2020-07-02
• 公開（公告）號: CN112004164B
• 公開（公告）日: 2023-02-21
• 發明（設計）人: 王若梅;區詩柔;周凡;林淑金;陳小燕
• 申請（專利權）人: 中山大學
• 主分類號: H04N21/8549
• 分類號: H04N21/8549;H04N21/234;H04N21/44;H04N21/2343;H04N21/4402;G10L15/26;G06V20/40;G06V10/762;G06V10/56
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種視頻海報自動生成方法，其特征在于，所述方法包括：

從視頻中提取必要的視頻內容信息，包括：視頻標題、音頻文本、視頻幀、視覺文本；

對所述視頻內容信息進行處理，包括對所述音頻文本進行主題分割得到視頻正文，將所述音頻文本結合所述視覺文本提取視頻關鍵詞，利用所述音頻文本生成視頻梗概，對所述視頻幀進行關鍵幀提取得到視頻圖；

根據所述視頻標題、所述視頻梗概、所述視頻關鍵詞、所述視頻正文、所述視頻圖，根據布局排版方法，生成一張視頻海報；

其中，所述將所述音頻文本結合所述視覺文本提取視頻關鍵詞，具體為：

對所述音頻文本和所述視覺文本進行分詞和去停用詞的預處理，分別得到音頻候選詞和視覺候選詞；

以所述音頻候選詞作為候選關鍵詞，計算每個候選關鍵詞的TF-IDF值、候選關鍵詞與所述視頻標題的語義相關性得分、候選關鍵詞與所述視覺候選詞的匹配信息得分、候選關鍵詞之間的語義相關性得分，加上相應權重求和計算總分，然后將總分按從高到低排列，前K個關鍵詞，就是最終的視頻關鍵詞。

2.如權利要求1所述的一種視頻海報自動生成方法，其特征在于，所述從視頻中提取視頻幀，具體為：

將視頻的每一幀提取出來；

評估所述每一幀的圖像質量，然后過濾掉模糊、昏暗、低質量的圖像，得到清晰高質量的幀；

根據所述清晰高質量的幀的視覺內容差異，將內容發生轉變的幀畫面劃分為不同的鏡頭，相同的鏡頭只保留一幀作為視頻鏡頭的代表幀，以此過濾掉大多數冗余的幀。

3.如權利要求1所述的一種視頻海報自動生成方法，其特征在于，所述對所述視頻幀進行關鍵幀提取得到視頻圖，具體為：

對所述視頻幀基于其顏色直方圖特征距離進行聚類得到若干類簇；

選取所述類簇的類中心作為關鍵幀，此關鍵幀將用作最后視頻海報的視頻圖。

4.如權利要求1所述的一種視頻海報自動生成方法，其特征在于，所述布局排版方法，具體為：

根據視頻海報每部分要素，設定相應的字體和字號；

根據視頻海報大小，設定合適的頁邊距；

將所述視頻標題居中放置于頂部；

所述視頻標題下面放置所述視頻梗概；

所述視頻梗概下面放置視頻關鍵詞，不同關鍵詞之間用分號隔開；

判斷所述視頻圖的長寬大小，若長大于寬，則將所述視頻圖居中置于所述視頻關鍵詞正下方，將所述視頻正文以單欄的形式置于所述視頻圖下方，若長小于等于寬，則將所述視頻圖放置于所述視頻關鍵詞的右下方，將所述視頻正文以雙欄的形式置于所述視頻圖左方和下方。