[發明專利]面向幻燈片智能截圖的翻頁誤截識別方法

有效

• 申請號: 202110312746.6
• 申請日: 2021-03-24
• 公開（公告）號: CN113205100B
• 公開（公告）日: 2022-07-29
• 發明（設計）人: 張暉;葉子皓;趙海濤;孫雁飛;朱洪波
• 申請（專利權）人: 南京郵電大學
• 主分類號: G06V10/50
• 分類號: G06V10/50;G06V10/75;G06K9/62
• 代理公司: 南京經緯專利商標代理有限公司 32200
• 代理人: 劉莎

本發明公開了一種面向幻燈片智能截圖場景的翻頁誤截識別方法，包括頁面重疊和拼接兩種情況的識別方法。識別圖像E是否由X、Y重疊而成的步驟包括：利用透明度公式的反推公式計算透明度矩陣A，處理A中的異常值后計算A的均值和方差；根據A的均值和方差判斷圖像重疊情況。識別圖像F是否由圖像Z與其他圖像拼接而成的步驟包括：在圖像Z中選取若干窗口，根據窗口內像素值方差進行篩選，得到待匹配窗口集合{W_Z}；對{W_Z}中的每個窗口都到F中進行圖像匹配，去除匹配值過低的窗口對，得到匹配的窗口對集合{(W_Z，W_F)}；根據{(W_Z，W_F)}計算得到位移向量集合{V}；統計{V}中數據得到直方圖，根據直方圖判斷圖像拼接情況。

技術領域

本發明涉及圖像處理領域，具體涉及一種面向幻燈片智能截圖的翻頁誤截識別方法。

背景技術

在學術研討會、商務發布會等直播場景中會出現許多與演講配套的幻燈片，這些幻燈片往往含有巨大的信息量，進而催生了將這些幻燈片截圖保存、留檔的需求。采用人工截圖的方式保存幻燈片頁面存在效率低、成本高等問題，因此采用軟件自動截圖的方式是首選。軟件截取幻燈片可以采用畫面差異度變化則截圖的基本思路，畫面差異度指視頻中相鄰兩個關鍵幀之間的差異程度，當檢測到直播畫面中畫面差異度出現峰值時說明畫面發生一次突變對應幻燈片的翻頁動作，依次便可進行幻燈片截圖。但是采用畫面差異度的方式截圖會有一些誤截問題，主要表現在幻燈片的翻頁過程被檢測并截取。常見的幻燈片翻頁過程包括漸變型和位移型。漸變型翻頁時，畫面從舊幻燈片逐漸變化為新幻燈片，此時的畫面實際上是新舊兩張幻燈片的重疊，基于畫面差異度的幻燈片檢測方法會將這一重疊的圖片當作新的幻燈片而檢測，稱之為重影誤截。位移型翻頁時，舊幻燈片向某個方向移動同時新幻燈片從畫面外移動到畫面內，此時的畫面實際上是新舊兩張幻燈片一部分的拼接，基于畫面差異度的幻燈片檢測方法同樣會將這一拼接的圖片當作新的幻燈片而檢測，稱之為拼接誤截。

發明內容

針對上述問題，本發明提供了面向幻燈片智能截圖的翻頁誤截識別方法，其目的在于判斷一張圖像是否是由其他圖像重疊或拼接而來，可以用于判斷類似上文中重影誤截、拼接誤截的問題。

一種面向幻燈片智能截圖的翻頁誤截識別方法，如圖3所示，用于對重影誤截和拼接誤截兩種翻頁誤截情況進行識別，該方法包括：

(一)圖像X、E、Y是基于畫面差異度從視頻中識別并連續截取的三張幻燈片圖像，識別圖像E是否屬于重影誤截的具體步驟如下：

步驟1：根據圖像X、Y和E，計算透明度矩陣A；

步驟2：將透明度矩陣A中的無窮值inf修改為同符號的圖像像素的最大灰度值、非數值NaN修改為其他有限數的均值，得到修改后的矩陣A′；

步驟3：計算A′的均值μ和方差σ²；

其中n為A′的元素總數；

步驟4：若σ²小于預設第一閾值，則圖像E是由圖像X、Y重疊而成，屬于重影誤截，且重疊透明度為μ，否則圖像E不屬于重影誤截；

(二)圖像Z、F是基于畫面差異度從視頻中識別并連續截取的兩張幻燈片圖片，識別圖像F是否屬于拼接誤截的具體步驟如下：

步驟(1)：在圖像Z中選取若干窗口，得到待匹配窗口集合{W_Z}；

步驟(2)：將{W_Z}中每個窗口與F進行匹配，得到匹配窗口對集合{(W_Z，W_F)}；