[發明專利]一種識別方法、裝置和電子設備

在審

• 申請號: 201811615801.3
• 申請日: 2018-12-27
• 公開（公告）號: CN111382598A
• 公開（公告）日: 2020-07-07
• 發明（設計）人: 辛曉哲;秦波;李瑞楠;孫博;王帥;黃海兵;李斌;陳偉
• 申請（專利權）人: 北京搜狗科技發展有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 莎日娜

本發明實施例提供了一種識別方法、裝置和電子設備，其中，所述方法包括：進入書寫狀態，從攝像頭采集的視頻圖像中獲取第一手部視頻圖像；對所述第一手部視頻圖像進行圖像處理，獲取書寫手指的指尖位置信息并依據所述指尖位置信息在顯示屏上顯示書寫軌跡；待書寫狀態結束后，依據所述指尖位置信息對書寫軌跡進行識別，得到對應的候選信息并展示；進而通過圖像處理確定的指尖位置信息實現書寫軌跡的識別，而無需采用深度信息進行識別，能夠提高識別效率。此外，由于本發明實施例無需采用深度信息進行識別，因此也無需采用深度攝像頭采集視頻圖像，從而降低了隔空手寫的識別成本。

技術領域

本發明涉及數據處理技術領域，特別是涉及一種識別方法、裝置和電子設備。

背景技術

文字作為一種普遍使用的信息傳播和交流工具，在人機交互系統中扮演著重要的角色，目前廣泛使用的文字輸入方式包括：鍵盤、觸屏、手寫板等，用戶在使用這些手寫設備進行手寫的過程中，需要與手寫設備進行接觸實現書寫；但是在某些場景下，例如駕駛過程中語音識別受噪聲影響失效情況下，接觸式手寫顯得尤其不簡便，因此隔空手寫應運而生。

目前，業內均是基于深度攝像頭進行隔空手寫識別，其弊端在于首先需要采用深度攝像頭采集圖像，成本高，其次，在實際識別過程中需要用到深度信息，因此識別效率低。

發明內容

本發明實施例提供一種識別方法，以降低隔空手寫的識別成本和提高識別效率。

相應的，本發明實施例還提供了一種識別裝置和一種電子設備，用以保證上述方法的實現及應用。

為了解決上述問題，本發明實施例公開了一種識別方法，具體包括：進入書寫狀態，從攝像頭采集的視頻圖像中獲取第一手部視頻圖像；對所述第一手部視頻圖像進行圖像處理，獲取書寫手指的指尖位置信息并依據所述指尖位置信息在顯示屏上顯示書寫軌跡；待書寫狀態結束后，依據所述指尖位置信息對書寫軌跡進行識別，得到對應的候選信息并展示。

可選地，所述從攝像頭采集的視頻圖像中獲取第一手部視頻圖像，包括：獲取攝像頭采集的視頻圖像，提取所述視頻圖像中手寫區域的圖像作為第一手部視頻圖像。

可選地，對所述第一手部視頻圖像進行圖像處理，包括：對第一手部視頻圖像進行預處理，得到第一預處理圖像；依據所述第一預處理圖像，判斷所述第一手部視頻圖像中手部的手勢是否為書寫手勢；若所述第一手部視頻圖像中手部的手勢為書寫手勢，則執行獲取書寫手指的指尖位置信息的步驟。

可選地，所述對第一手部視頻圖像進行預處理，得到第一預處理圖像，包括：采用高斯混合模型對所述第一手部視頻圖像進行背景減除，從所述第一手部視頻圖像中提取前景得到第一圖像；采用所述膚色模型對所述第一圖像進行過濾，得到第二圖像；對所述第二圖像進行形態學處理，得到第三圖像；對所述第三圖像進行二值化處理，得到第一預處理圖像。

可選地，所述依據所述第一預處理圖像，判斷所述第一手部視頻圖像中手部的手勢是否為書寫手勢，包括：對所述第一預處理圖像進行輪廓檢測，確定所述第一預處理圖像中的手部輪廓；對所述手部輪廓進行凸包檢測，確定凸出手指的個數和各凸出手指的指尖位置信息；若所述凸出手指的個數與書寫手勢對應凸出手指的設定個數匹配，則確定所述第一手部視頻圖像中手部的手勢是書寫手勢。

可選地，所述依據所述第一預處理圖像，判斷所述第一手部視頻圖像中手部的手勢是否為書寫手勢，包括：將所述第一預處理圖像輸入至靜態手勢識別模型中，得到各手勢的概率分值，其中，所述手勢至少包括：開始書寫手勢、書寫手勢、選取手勢、刪除手勢和其他手勢；若書寫手勢的概率分值最高，則確定所述第一手部視頻圖像中手部的手勢是書寫手勢。

可選地，所述獲取書寫手指的指尖位置信息，包括：將凸出手指的指尖位置信息確定為書寫手指的指尖位置信息。