[發明專利]一種基于人工智能的視頻海報展示方法和系統

有效

• 申請號: 202110067898.4
• 申請日: 2021-01-19
• 公開（公告）號: CN112733779B
• 公開（公告）日: 2023-04-07
• 發明（設計）人: 葛玲玲;申立明;唐蘭林;葛瑩;孫宇
• 申請（專利權）人: 三星電子（中國）研發中心;三星電子株式會社
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06V20/62;G06F16/583;G06F16/783;G06F40/284
• 代理公司: 北京德琦知識產權代理有限公司 11018
• 代理人: 蔣歡;王琦

1.一種基于人工智能的視頻海報展示方法，其特征在于，包括：

根據用戶指令搜索得到目標視頻和至少一個海報，計算所述至少一個海報的圖像描述文本與所述目標視頻的描述文本關鍵字的匹配度，按照匹配度從高到低的順序對所述至少一個海報進行排序，得到排序后的海報序列；

對所述海報序列中匹配度最高的海報進行元素分離，得到主體元素和背景元素；

將所述主體元素、背景元素和所述目標視頻的標題信息按照目標場景的需求進行處理，合成新的海報；

其中，對所述海報序列中匹配度最高的海報進行元素分離，得到主體元素和背景元素具體包括：對所述海報序列中匹配度最高的海報執行以下操作：

對所述海報進行實例識別，得到所述海報中的主體元素；

對所述海報進行光符識別，識別出所述海報中的文字；

從所述海報中摳出主體元素和文字，對空白部分進行環境填充后得到背景元素。

2.根據權利要求1所述的方法，其特征在于，計算所述至少一個海報的圖像描述文本與所述目標視頻的描述文本關鍵字的匹配度具體包括：

根據所述目標視頻的描述信息得到所述目標視頻的描述文本關鍵字；

對每一個海報，采用Image?Captain技術獲取其圖像描述文本；

利用詞向量計算每一個海報的圖像描述文本與所述目標視頻的描述文本關鍵字之間的匹配度。

3.根據權利要求1或2所述的方法，其特征在于，該方法還包括：

在搜索得到所述至少一個海報后，從中濾除不符合目標場景的物理尺寸需求的海報。

4.根據權利要求1或2所述的方法，其特征在于，將所述主體元素、背景元素和所述目標視頻的標題信息按照目標場景的需求進行處理，合成新的海報具體包括：

按照所述目標場景預設的主體位置放置所述主體元素；

按照所述目標場景的背景范圍對所述背景元素進行拉伸和/或平鋪；

將所述目標視頻的標題信息進行統一的樣式轉換，并放置在所述目標場景的預設位置。

5.一種基于人工智能的視頻海報展示系統，其特征在于，包括：搜索關鍵字獲取模塊、海報數據庫、海報匹配模塊、圖像分割模塊和海報重組模塊，其中：

所述搜索關鍵字獲取模塊，用于根據用戶指令對所述海報數據庫進行搜索，得到目標視頻和至少一個海報；

所述海報匹配模塊，用于計算所述至少一個海報的圖像描述文本與所述目標視頻的描述文本關鍵字的匹配度，按照匹配度從高到低的順序對所述至少一個海報進行排序，得到排序后的海報序列；

所述圖像分割模塊，用于對所述海報序列中匹配度最高的海報進行元素分離，得到主體元素和背景元素；

所述海報重組模塊，用于將所述主體元素、背景元素和所述目標視頻的標題信息按照目標場景的需求進行處理，合成新的海報；

其中，所述圖像分割模塊具體包括：實例識別模塊、光符識別模塊和環境填充模塊，具體用于對所述海報序列中匹配度最高的海報執行以下操作：

所述實例識別模塊，用于對海報進行實例識別，得到所述海報中的主體元素；

所述光符識別模塊，用于對海報進行光符識別，識別出所述海報中的文字；

所述環境填充模塊，用于對摳出主體元素和文字后的海報的空白部分進行環境填充，得到背景元素。

6.根據權利要求5所述的系統，其特征在于：

所述搜索關鍵字獲取模塊，還用于根據所述目標視頻的描述信息得到所述目標視頻的描述文本關鍵字；

所述海報匹配模塊具體包括：圖像自動描述模塊和詞向量排序模塊，其中：

所述圖像自動描述模塊，用于對每一個海報采用Image?Captain技術獲取其圖像描述文本；

所述詞向量排序模塊，利用詞向量計算每一個海報的圖像描述文本與所述目標視頻的描述文本關鍵字之間的匹配度，并根據計算得到的匹配度按照從高到低的順序對相應的海報進行排序。

7.根據權利要求6所述的系統，其特征在于，所述海報匹配模塊還包括場景匹配模塊，用于從搜索得到的所述至少一個海報中濾除不符合目標場景的物理尺寸需求的海報。

8.根據權利要求5或6所述的系統，其特征在于，所述海報重組模塊具體用于：

按照所述目標場景預設的主體位置放置所述主體元素；

按照所述目標場景的背景范圍對所述背景元素進行拉伸、平鋪和/或環境填充；

將所述目標視頻的標題信息進行統一的樣式轉換，并放置在所述目標場景的預設位置。