[發(fā)明專利]一種車胎文本檢測和識(shí)別方法

有效

• 申請(qǐng)?zhí)枺?/td>: 202011008188.6
• 申請(qǐng)日: 2020-09-23
• 公開（公告）號(hào): CN112883957B
• 公開（公告）日: 2022-04-22
• 發(fā)明（設(shè)計(jì)）人: 劉遠(yuǎn)超;吳宗林;黃俊俊;姜世強(qiáng);陳欽鴻
• 申請(qǐng)（專利權(quán)）人: 浙江浩騰電子科技股份有限公司
• 主分類號(hào): G06V20/62
• 分類號(hào): G06V20/62;G06V30/10;G06N3/04
• 代理公司: 杭州浙科專利事務(wù)所(普通合伙) 33213
• 代理人: 周紅芳

1.一種車胎文本檢測和識(shí)別方法，其特征在于，包括如下步驟：

步驟1：通過深度神經(jīng)網(wǎng)絡(luò)對(duì)車胎側(cè)面文字進(jìn)行檢測，得到的結(jié)果記為R＝{r_k|k＝1,2,…,K}，定義分布鄰近的一組字符為組合字符簇，在R中，r_k表示檢測到的第k個(gè)組合字符簇的最小外接矩形包圍框，K表示檢測到的組合字符簇的數(shù)量；

步驟2：定義集合C＝{p_k＝(x_k,y_k)|k＝1,2,…,K}，其中，p_k為r_k的中心點(diǎn)；將集合C中的坐標(biāo)代入式(1)中，通過式(2)，(3)，擬合得到圓曲線方程x²+y²+ax+by+c＝0的參數(shù)a,b,c及其圓心坐標(biāo)(x₀,y₀)，其中，

A＝(X^T·X)^-1·X^T·Y (3)

式中，δ表示事先選定的擬合誤差閾值，Q(A)表示矩陣形式的圓曲線方程表達(dá)式；

步驟3：記r_k所包圍的圖像為I_k，通過轉(zhuǎn)換I_k來將圖像中彎曲的文本行拉直，具體為：

步驟3.1：根據(jù)公式(4)得到p_k相對(duì)于擬合的圓曲線方程的圓心(x₀,y₀)的角度θ_k；

根據(jù)(5)給出的規(guī)則翻轉(zhuǎn)I_k，得到的圖像記為I′_k；

步驟3.2：通過深度神經(jīng)網(wǎng)絡(luò)對(duì)I′_k檢測，得到的結(jié)果記為Q＝{q_i|i＝1,2,…,N}，其中，q_i表示I′_k中檢測到的第i個(gè)字符所在的最小外接旋轉(zhuǎn)矩形框，N表示I′_k中檢測到的字符的數(shù)量；定義集合T＝{t_i|i＝1,2,…,N}，其中t_i表示q_i的頂邊中點(diǎn)；定義集合B＝{b_i|i＝1,2,…,N}，其中b_i表示q_i的底邊中點(diǎn)；

步驟3.3：擴(kuò)充集合T：t₁為I′_k中最左側(cè)的點(diǎn)，通過公式(6)，將點(diǎn)T_l加入T中t₁之前；t_N為I′_k中最右側(cè)的點(diǎn)，通過公式(7)，將點(diǎn)T_r加入T中t_N之后，T_l、T_r分別表示擴(kuò)充后的集合T中最左側(cè)和最右側(cè)的點(diǎn)；

當(dāng)存在間隔較遠(yuǎn)的兩個(gè)字符時(shí)，在集合T加入一個(gè)控制點(diǎn)：當(dāng)T中相鄰兩點(diǎn)t_i和t_i+1之間的距離時(shí)，根據(jù)公式(8)將點(diǎn)P_m加入點(diǎn)集T中，且P_m排列于t_i和t_i+1之間，其中，P_m表示在大間隔字符之間加入的點(diǎn)，W_t滿足公式(9)；

最終擴(kuò)充后的控制點(diǎn)集合T＝{t_i|i＝1,2,…,N+2+K₀}，其中K₀表示在較大間隔處添加的控制點(diǎn)的數(shù)量；

步驟3.4：采用步驟3.3同樣的方法擴(kuò)充得到集合B＝{b_i|i＝1,2,…,N+2+K₀}；T和B構(gòu)成圖像I′_k中的控制點(diǎn)集；

步驟3.5：將待生成的目標(biāo)圖像記為I″_k，構(gòu)造生成I″_k的控制點(diǎn)集：構(gòu)建分布在I″_k上沿的點(diǎn)集T′＝{t′_i＝((i-1)×d_k,0)|i＝1,2,...,N}；構(gòu)建分布在I″_k下沿的點(diǎn)集B′＝{b′_i＝((i-1)×d_k,H_k)|i＝1,2,...,N}，其中，點(diǎn)間距d_k和圖像I″_k的高度H_k根據(jù)公式(10)計(jì)算得到；

式中，H_i、W_i分別表示q_i的高度與寬度，a為常數(shù)系數(shù)；

步驟3.6：定義集合TB＝{{(t_i,t′_i),(b_i,b′_i)}|i＝1,2,...,N}，其中(t_i,t′_i)表示t_i和t′_i組成的控制點(diǎn)對(duì)，(b_i,b′_i)表示b_i和b′組成的控制點(diǎn)對(duì)；將TB中的控制點(diǎn)對(duì)代入TPS樣條插值函數(shù)實(shí)現(xiàn)圖像I_k到圖像I″_k的轉(zhuǎn)換；轉(zhuǎn)換后的圖像I″_k為平直的矩形圖像，在I″_k中的內(nèi)容為被拉直后水平排列的文字；

步驟4：將圖像I″_k輸入文字識(shí)別模型，輸出文本識(shí)別的結(jié)果；

步驟5：重復(fù)步驟3和步驟4，最終得到車胎上全部文本的識(shí)別結(jié)果；根據(jù)車胎文本的排列規(guī)范，能夠得到車胎或車輛信息。