[發明專利]一種快遞面單定位矯正方法及設備

在審

• 申請號: 202010618248.X
• 申請日: 2020-06-30
• 公開（公告）號: CN111767921A
• 公開（公告）日: 2020-10-13
• 發明（設計）人: 孫俊;蔡宏翔;熊意超
• 申請（專利權）人: 上海媒智科技有限公司
• 主分類號: G06K9/32
• 分類號: G06K9/32;G06K9/20;G06K9/34;G06K9/46;G06N3/04;G06N3/08
• 代理公司: 上海恒慧知識產權代理事務所(特殊普通合伙) 31317
• 代理人: 徐紅銀

本發明提供一種快遞面單定位矯正方法及設備，包括：對含快遞面單的圖像進行通過標注，將所述圖像中的快遞面單覆蓋住并標記文字朝向，得到快遞面單標注數據；將所述標注數據作為訓練集訓練卷積神經網絡，使得所述卷積神經網絡能預測快遞面單的位置和文字方向；將待檢測的含快遞面單的圖像輸入訓練后的所述卷積神經網絡，得到預測的快遞面單的位置和文字方向，根據該預測的快遞面單的位置和文字方向進行定位矯正，得到定位矯正后的快遞面單。本發明提出的快遞面單定位矯正方法，能用于實現快遞分揀自動化的任務中，彌補了當前技術中沒有針對快遞單定位矯正技術的不足。

技術領域

本發明涉及圖像處理技術領域，具體地，涉及一種基于卷積神經網絡的快遞面單定位矯正方法及設備。

背景技術

近些年來，電商的發展使廣大的人民群眾可以購買天南海北的產品，這些產品最終會通過快遞的方式送到人們的手中。由于巨大的快遞數目導致人工分揀效率低下，而通過計算級視覺等方法來實現分揀工作的自動化，可以有效提高分揀效率。快遞面單的定位矯正是整個自動化流程中必不可缺的一部分，只有面單定位準了，后續任務才有可能準確的進行下去。

目前已經有不少關于快遞面單的自動識別技術，比如：

公開號為CN108960148A的中國發明申請，該發明公開了一種基于視頻圖像的快遞面單三段碼識別方法，從而實現快遞的自動分揀。該方法首先構建大量快遞面單圖像的數據庫，訓練識別數字位置和類別的神經網絡模型，最終使用檢測模型檢測三段碼的實時檢測。然而該方法的先驗是快遞單已經是清晰可見的且三段碼只有數字組成，同時占據圖像中的大部分位置，從而才能利用檢測方法直接進行檢測。該方法存在三個問題，一是在某些使用場景下快遞單并不占據圖像的主要部分，在這樣的情況下，該方法難以奏效；二是當快遞單呈現不同角度時，該方法無法處理；三是三段碼中含有數字之外的其他英文字母，該方法顯然無法處理帶有字母的情況。而快遞面單的定位與矯正可以幫助該方法處理第一和第二個問題。

公開號為CN110705486A的中國發明申請，其公開一種基于視頻圖像識別快遞面單上傾斜數字的方法，是對《一種基于視頻圖像的快遞面單三段碼識別方法》(CN 108960148A)的一種改進。該方法采集含有快遞單的視頻圖像，對三段碼進行人工標注得到訓練數據，用這些訓練數據訓練n段碼的數字識別模型。使用該模型識別出n個相同大小的矩形框來框選出n段數字，計算n個矩形框的中心點坐標，來得到面單的傾斜角度，旋轉使圖像變正，再識別n段碼。該方法存在的問題有如下幾點，一是面單并不一定占據圖像的主要部分，因此檢測就有可能出現問題，導致不可能得到所需要的中心點，二是在矯正出來的文字是水平的情況下，由于圖像上下顛倒的問題，在假設只有數字存在的情況下，也有可能將6識別為9，如果考慮還有英文字母的情況，顯而易見，不能奏效。使用快遞面單定位矯正方法，可以有效避免該方法遇到的問題。

可見，上述CN108960148A忽略掉快遞面單定位矯正的重要性，從而在面單傾斜、面單占據圖像區域較小的情況下無法奏效；CN110705486A同樣忽視了快遞面單定位矯正的重要性，在進行圖像矯正時可能出現圖像旋轉180度的情況(即文字本應朝上但是矯正結果卻朝下)導致該方法無法奏效，同時，在面單占據整體圖像區域較小時，該方法同樣無法檢測到所需要的文本框，從而導致整體流程受阻。

發明內容

針對現有技術中的缺陷，本發明的目的是提供一種快遞面單定位矯正方法及設備。

根據本發明的一個方面，提供一種快遞面單定位矯正方法，包括：

對含快遞面單的圖像進行通過標注，將所述圖像中的快遞面單覆蓋住并標記文字朝向，得到快遞面單標注數據；

將所述標注數據作為訓練集訓練卷積神經網絡，使得所述卷積神經網絡能預測快遞面單的位置和文字方向；