[發明專利]一種基于視頻腳本語義識別的視頻生產方法及裝置

有效

• 申請號: 202011543648.5
• 申請日: 2020-12-24
• 公開（公告）號: CN112632326B
• 公開（公告）日: 2022-02-18
• 發明（設計）人: 王鶴;林洪祥;何俊華;王雅萍
• 申請（專利權）人: 北京風平科技有限公司
• 主分類號: G06F16/738
• 分類號: G06F16/738;G06F16/74;G06F16/735
• 代理公司: 北京航信高科知識產權代理事務所(普通合伙) 11526
• 代理人: 劉傳準

本申請提供了一種基于視頻腳本語義識別的視頻生產方法及裝置，所述方法包括獲取用戶給定的視頻生產腳本，所述視頻生產腳本中攜帶有多條視頻制作語句，每條視頻制作語句包括素材類型識別標簽及素材屬性標簽，所述素材屬性標簽包括素材描述和/或素材展現形式；根據所述素材類型識別標簽確定進行素材選取的素材庫，在所述素材庫中，根據所述素材屬性標簽確定素材和/或確定素材的運行方式，將所述素材按所述視頻生產腳本中視頻制作語句的順序生成視頻。通過上述方法或裝置，本申請能夠智能分析出海量視頻素材，結合語義理解視頻腳本，自動生成短視頻。

技術領域

本申請屬于視頻處理技術領域，特別涉及一種基于視頻腳本語義識別的視頻生產方法及裝置。

背景技術

傳統的短視頻人工生產方式的主要包括以下步驟：1、內容策劃，編寫視頻腳本；2、拍攝素材或者將現有內容編輯為可用素材；3、使用視頻編輯工具按照腳本將素材編輯為完整視頻。這個過程每個步驟都需要消耗比較大的人力資源和時間在里面

現有一種視頻模板的自動生產方式，即事前針對某種特定場景編輯一組固定的視頻素材，然后使用者輸入的指定文本內容，進行字幕和文字展示內容與語音替換。這種方式生產的視頻形式基本固定，除了文字內容部分，視頻畫面內容相對固定。相當于視頻腳本是固定模式并且素材也只能在比較小的范圍內選擇。這種方式雖然解決了一部分人工與時間成本，但應用場景有局限性，但對于一些自定義的視頻腳本并不能應用此種方式解決人力和時間的消耗。例如交通事故相關的模板就只能局限在生產交通事故相關的視頻上，如果想生產其他內容的視頻，一種方式是系統開發人員增加相關的模板，這樣就增加了開發人員的工作，或者由視頻編輯人員自己手動替換模板中的素材，這樣的話就增加了視頻編輯人員的工作量。

發明內容

為了解決上述技術問題至少之一，本申請提供了一種基于視頻腳本語義識別的視頻生產方法及裝置。

本申請的第一個方面，一種基于視頻腳本語義識別的視頻生產方法，包括：獲取用戶給定的視頻生產腳本，所述視頻生產腳本中攜帶有多條視頻制作語句，每條視頻制作語句包括素材類型識別標簽及素材屬性標簽，所述素材屬性標簽包括素材描述和/或素材展現形式；根據所述素材類型識別標簽確定進行素材選取的素材庫，在所述素材庫中，根據所述素材屬性標簽確定素材和/或確定素材的展現形式，將所述素材按所述視頻AI生產腳本智能整合修改相關素材生成視頻。

優選的是，根據所述素材屬性標簽確定素材包括：解析所述素材屬性標簽對應的素材選取規則；根據所述素材選取規則在對應素材庫中進行素材的檢索與提取，其中，按照與素材選取規則對應的劃分邏輯進行素材劃分并標注的方式構建所述素材庫。

優選的是，構建所述素材庫包括：將包含素材的視頻進行片段劃分；獲取素材處理者對劃分后的各素材片段進行的視頻描述；將進行了視頻描述后的素材片段按照預定的劃分邏輯存入不同素材庫，其中，所述預定的劃分邏輯包括但不限于素材片段的時長，素材片段的分辨率，或者素材片段的視頻描述。

優選的是，將進行了視頻描述后的素材片段存入素材庫包括：計算待入庫的素材片段的感知哈希值；確定與待入庫的素材片段的視頻描述一致的素材庫中是否存在相似感知哈希值的素材片段，若存在相似感知哈希值的素材片段，且待入庫的素材片段與所述具有相似感知哈希值的素材片段的md5值不同，則將待入庫的素材片段存入該視頻描述所對應的素材庫中，否則，將待入庫的素材片段提交人工處理，由人工確定所述待入庫的素材片段是否存入該視頻描述對應的素材庫；其中，所述相似感知哈希值是指兩個感知哈希值的漢明距離小于預設值。

優選的是，根據所述素材屬性標簽確定素材的運行方式包括：校驗所述素材屬性標簽與預制的素材處理命令是否一致，若一致，則按照預制的素材處理命令對所述素材進行處理。