[發明專利]圖像處理方法、裝置和介質

在審

• 申請號: 202010615687.5
• 申請日: 2020-06-30
• 公開（公告）號: CN113870325A
• 公開（公告）日: 2021-12-31
• 發明（設計）人: 韋濤;饒旭東;李丹丹
• 申請（專利權）人: 北京搜狗科技發展有限公司
• 主分類號: G06T7/33
• 分類號: G06T7/33;G06K9/32;G06K9/62
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 蘇培華

本發明實施例提供了一種圖像處理方法和裝置、一種用于圖像處理的裝置，其中的方法具體包括：接收圖像獲取裝置采集的序列幀圖像；依據圖像特征的方法，對所述序列幀圖像進行第一圖像配準，以得到對應的配準結果；若所述配準結果為配準失敗，則依據圖像模板的方法，對所述序列幀圖像進行第二圖像配準。本發明實施例能夠提高圖像配準的準確率。

技術領域

本發明涉及圖像處理技術領域，特別是涉及一種圖像處理方法和裝置、一種機器可讀介質。

背景技術

詞典筆作為一款可實現自助查詞、翻譯、學口語的學習工具，近年來逐漸應用于學習場景中，可以在手機受限制的學習場景中提供快速查詞的體驗。

詞典筆首先使用筆尖攝像頭掃描文本，然后輸出一行拼接好的文本圖像以備圖像識別。由于筆尖攝像頭的視野范圍較窄，掃描得到的文本圖像通常為序列幀圖像；因此，為了得到完整的行文本圖像，需要用到圖像拼接技術。

目前的圖像拼接技術為了獲得較好的拼接效果，通常首先對序列幀圖像進行圖像預處理，然后針對預處理后的序列幀圖像進行拼接。上述圖像預處理利用二值化、膨脹等操作，預估序列幀圖像中文本的傾斜角度，利用預估結果對序列幀圖像進行矯正；這樣，上述矯正可以克服序列幀圖像中的文本扭曲問題，將矯正后的序列幀圖像送至圖像拼接流程，能夠提高拼接圖像的平直度。

發明人在實施本發明實施例的過程中發現，目前的圖像拼接技術在白底黑字或黑底白字等背景下，文本和背景區分明顯，能夠得到較好的預處理效果和圖像拼接效果；但在例如繪本的復雜背景下，文本和背景區分不明顯，得到的預處理結效果和圖像拼接效果均較差。

并且，目前的拼接技術通常包括：圖像配準和圖像融合。常用的圖像配準方法通常為圖像特征的方法。然而，該方法依賴于圖像的紋理信息，如果圖像的紋理信息豐富，則能夠提取出較多的圖像特征；如果圖像空白較多、或紋理信息較少，則提取的圖像特征點很少，則圖像配準的準確率較低。例如，在文本圖像中出現較大空白、或者較多結構簡單的字符(如“一”字)的情況下，圖像特征的方法將得到較差的圖像配準結果。

發明內容

鑒于上述問題，提出了本發明實施例以便提供一種克服上述問題或者至少部分地解決上述問題的圖像處理方法、圖像處理裝置及用于圖像處理的裝置，本發明實施例可以提高圖像配準的準確率。

為了解決上述問題，本發明公開了一種圖像處理方法，包括：

接收圖像獲取裝置采集的序列幀圖像；

依據圖像特征的方法，對所述序列幀圖像進行第一圖像配準，以得到對應的配準結果；

若所述配準結果為配準失敗，則依據圖像模板的方法，對所述序列幀圖像進行第二圖像配準。

另一方面，本發明實施例公開了一種圖像處理裝置，包括：

接收模塊，用于接收圖像獲取裝置采集的序列幀圖像；

第一圖像配準模塊，用于依據圖像特征的方法，對所述序列幀圖像進行第一圖像配準，以得到對應的配準結果；

第二圖像配準模塊，用于若所述配準結果為配準失敗，則依據圖像模板的方法，對所述序列幀圖像進行第二圖像配準。

再一方面，本發明實施例公開了一種用于圖像處理的裝置，包括有存儲器，以及一個或者一個以上的程序，其中一個或者一個以上程序存儲于存儲器中，且經配置以由一個或者一個以上處理器執行所述一個或者一個以上程序包含用于進行以下操作的指令：

接收圖像獲取裝置采集的序列幀圖像；

依據圖像特征的方法，對所述序列幀圖像進行第一圖像配準，以得到對應的配準結果；

若所述配準結果為配準失敗，則依據圖像模板的方法，對所述序列幀圖像進行第二圖像配準。