[發明專利]一種基于結構及相似度的視頻提取PPT方法

有效

• 申請號: 201911335327.3
• 申請日: 2019-12-23
• 公開（公告）號: CN111104913B
• 公開（公告）日: 2023-03-24
• 發明（設計）人: 鄭茜穎;邱建濱;陳伊涵;王帥;曾青耀;魏海云;邱純乾
• 申請（專利權）人: 福州大學
• 主分類號: G06V30/413
• 分類號: G06V30/413;G06V20/40;G06V30/19;G06V30/18;G06V10/74;G06V10/56;G06T5/30;G06T7/13
• 代理公司: 福州元創專利商標代理有限公司 35100
• 代理人: 錢莉;蔡學俊

本發明涉及一種基于結構及相似度的視頻提取PPT方法，首先，采集視頻的第一幀圖像；對幀圖像進行顏色空間轉換、高斯濾波、膨脹、Canny邊緣檢測、輪廓檢測，找到其中的目標區域；然后，利用多邊形擬合、透視變換對目標區域進行處理，將目標區域轉化為矩形；相隔2秒在視頻中再取新幀，重復上述的操作，獲取第二圖的PPT目標區域；最后，對兩PPT圖片進行相似度比較和差異度比較，接著留下第二幅PPT圖，重復執行上述操作直至視頻結束；對所有保存的圖片進行再裁剪和時間序列篩選處理，以PDF文件形式保存。本發明提供一種從視頻中簡單、快速提取PPT內容圖片并且以PDF文件形式保存的方法。

技術領域

本發明涉及圖像處理技術領域，特別是一種基于結構及相似度的視頻提取PPT方法。

背景技術

Microsoft Office PowerPoint，是微軟公司的演示文稿軟件，功能強大，應用廣泛。在當今信息化時代中，隨著應用水平的逐步提高，PPT正成為人們工作生活中的重要組成部分，在各行各業中占據著舉足輕重的地位。人們可以通過傳統方法，比如U盤拷貝、郵箱傳遞等，可以獲取他們所需要的PPT內容。但是現在在大多數的會議、講座等場合，人們手里可能只有一份關于會議、講座現場的視頻，無法通過傳統方法獲取所需要的PPT內容，無法高效且迅速地獲取所需要的信息，使相關視頻的利用率下降。因此需要一種能夠從視頻中提取所需要的PPT內容并合理存放，這樣才能夠有效的整理好講座現場的視頻，深化知識的應用。

目前從視頻中提取PPT存在以下幾個難點問題：如何判斷提取的PPT內容圖片是否屬于相同頁，如何判斷PPT區域被遮擋，不進行提取操作，若存在PPT換頁動畫情況下該如何進行提取操作。

發明內容

有鑒于此，本發明的目的是提供一種基于結構及相似度的視頻提取PPT方法，要通過對幀圖像進行預處理、多層次的比較操作，完成從視頻中精確定位并提取PPT內容圖片的目標，并將其以PDF文件形式保存，便于用戶使用。

本發明采用以下方案實現：一種基于結構及相似度的視頻提取PPT方法，包括以下步驟：

步驟S1：通過視頻采集設備采集含有PPT內容的視頻，并上傳到PC端，直接讀取視頻的長、寬和總幀數，提取視頻的第一幀圖像，作為起始圖像；

步驟S2：對圖像依次進行顏色空間轉換、高斯濾波、膨脹操作去除干擾邊緣和噪聲點，然后利用Canny算子對膨脹操作后的圖像進行邊緣檢測，再采用輪廓檢測尋找圖片中所有可能的輪廓，最后找到其中面積最大的輪廓，即目標區域；

步驟S3：利用多邊形擬合和透視變換操作對目標區域進行裁剪和視角矯正，將目標區域轉化為矩形；

步驟S4：相隔2秒再次在步驟S1的視頻中取一幀視頻圖像，作為新幀，重復上述步驟S2到步驟S3的操作，獲取第二圖的PPT目標區域；

步驟S5：對兩PPT圖片進行相似度比較和差異度比較操作，然后留下第二幅PPT圖，重復執行上述步驟S4和步驟S5直至視頻結束；

步驟S6：將所有最終得到的PPT內容圖片進行再裁剪和時間序列篩選處理，最后以PDF文件形式保存。

進一步地，所述步驟S2具體包括以下步驟：

步驟S21：首先通過顏色空間轉換將彩色圖像轉變為灰度圖像，用以消除幀圖像的背景區域存在的顏色信息干擾；接著采用高斯濾波的方式對圖像冗余的輪廓信息進行濾除；然后采用形態學膨脹操作擴張圖像中的高亮部分，縮小黑暗部分的面積；最后對圖像進行Canny邊緣檢測，找到圖像中物體的真實邊緣；

步驟S22：利用輪廓檢測對邊緣檢測結果進行拓撲分析，找到其中所有可能的最外層輪廓而忽略輪廓中的孔邊界，最后提取所有可能輪廓中面積最大的輪廓作為PPT目標區域。

進一步地，所述步驟S3具體包括以下步驟：