[發明專利]一種基于圖像局部特征點配準的表單內容提取方法

有效

• 申請號: 201510736902.6
• 申請日: 2015-11-03
• 公開（公告）號: CN105354550B
• 公開（公告）日: 2018-09-28
• 發明（設計）人: 呂岳;趙杰;呂淑靜
• 申請（專利權）人: 華東師范大學
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/46;G06T7/30
• 代理公司: 上海麥其知識產權代理事務所(普通合伙) 31257
• 代理人: 董紅曼

本發明提出了一種基于圖像局部特征點配準的表單內容提取方法，包括以下步驟：提取輸入圖像中的SIFT特征點；求出輸入圖像與其對應基準圖像的各局部圖像塊的匹配特征點對集合；根據匹配特征點對，計算基準圖像的各局部圖像塊的變換矩陣；根據變換矩陣，求出輸入圖像中的各對應局部圖像塊；以局部圖像塊為節點、以局部圖像塊間幾何關系為邊建立圖模型，通過圖匹配運算對輸入圖像的各局部圖像塊和基準圖像的各局部圖像塊進行匹配，求得匹配圖像塊集合；根據匹配圖像塊集合中的匹配特征點對集合，求得全局變換矩陣；通過全局變換矩陣變換輸入圖像；將變換后的輸入圖像與基準圖像相減，得到對應像素的差值；對相減后的輸入圖像進行二值化，得到表單內容。

技術領域

本發明涉及圖像處理領域，尤其涉及一種基于圖像局部特征點配準的表單內容提取方法。

背景技術

近些年來隨著電商的迅猛發展，快遞包裹的數量急劇增加。快遞包裹中的表單中含有包裹寄件人、收件人、收件人地址、郵寄物品等很多信息，這些信息對郵件的分揀、信息的提取及安檢等都有非常重要的意義。而識別包裹表單上的信息，首先需要提取用戶輸入的內容，然后才進行識別等進一步的工作。

由于因為光照、圖像采集設備、包裹的尺寸等差異，包裹表單圖像在分辨率、亮度、傾斜角度等處理方面比較復雜。因此，現在市場上亟需一種新的圖像處理方法來克服上述缺陷。

發明內容

本發明的目的在于克服現有技術中的缺陷，提出了一種基于圖像局部特征點配準的表單內容提取方法。

本發明提出的基于圖像局部特征點配準的表單內容提取方法，包括以下步驟：

步驟一：提取輸入圖像中的SIFT特征點；

步驟二：求出所述輸入圖像與其對應基準圖像的各局部圖像塊的匹配特征點對集合；

步驟三：根據所述匹配特征點對，計算所述基準圖像的各局部圖像塊的變換矩陣；

步驟四：根據所述變換矩陣，求出所述輸入圖像中的各對應局部圖像塊；

步驟五：以所述局部圖像塊為節點、以所述局部圖像塊間幾何關系為邊建立圖模型，通過圖匹配運算對所述輸入圖像的各局部圖像塊和所述基準圖像的各局部圖像塊進行匹配，求得匹配圖像塊集合；

步驟六：根據所述匹配圖像塊集合中的匹配特征點對集合，求得全局變換矩陣；

步驟七：通過所述全局變換矩陣變換所述輸入圖像；

步驟八：將變換后的所述輸入圖像與所述基準圖像相減，得到對應像素的差值；

步驟九：對相減后的所述輸入圖像進行二值化，得到表單內容。

本發明提出的基于圖像局部特征點配準的表單內容提取方法中，所述基準圖像的局部圖像塊為矩形圖像塊。

本發明提出的基于圖像局部特征點配準的表單內容提取方法中，所述步驟一之前先選取所述基準圖像中具有代表性的圖像塊作為局部圖像塊。其中，具有代表性的圖像塊是指檢測到SIFT特征點比較多的圖像塊。

本發明提出的基于圖像局部特征點配準的表單內容提取方法中，所述步驟二采用基于特征描述子的歐幾里德距離的最近鄰與次近鄰比值法。

本發明提出的基于圖像局部特征點配準的表單內容提取方法中，所述步驟三和步驟六中，采用RANSAC方法計算所述變換矩陣。

本發明提出的基于圖像局部特征點配準的表單內容提取方法中，所述步驟五中，同一圖像上任意兩個局部圖像塊間的幾何關系定義為：兩局部圖像塊中心的距離與局部圖像塊的兩個角之間距離的比值。