[發明專利]基于手寫識別的人機交互方法和系統及運行該系統的設備

無效

• 申請號: 200710002611.X
• 申請日: 2007-01-24
• 公開（公告）號: CN101231567A
• 公開（公告）日: 2008-07-30
• 發明（設計）人: 陳又新;王炎;胡洪濤;樸相煥
• 申請（專利權）人: 北京三星通信技術研究有限公司;三星電子株式會社
• 主分類號: G06F3/048
• 分類號: G06F3/048;G06F3/041;G06K9/00
• 代理公司: 北京銘碩知識產權代理有限公司
• 代理人: 郭鴻禧;馮敏

技術領域

本發明涉及一種實現人機交互的系統和方法，更具體地講，涉及一種通過手寫識別技術來執行相應功能，從而實現人機交互的系統和方法以及運行基于手寫識別的人機交互系統的設備。

背景技術

由于理想的人機交互要求以人為中心，其發展的趨勢要求更加接近于自然的形式，因此基于自然交互方式的多通道人機交互逐漸發展起來。多通道人機交互綜合采用視覺、語音等新的交互通道、設備和交互技術，使用戶利用多個通道以自然、并行、協作的方式進行人機對話，通過整合來自多個通道的精確的和不精確的輸入來捕捉用戶的交互意圖，提高人機交互的自然性和高效性。

隨著手寫識別技術的發展，商用化程度越來越高，從而利用自然語言進行人機交互的方式成為了可能。

當前廣泛采用的圖形用戶界面的優點是，與傳統的字符命令相比，形象生動，可以提高視覺目標的搜索效率，其主要缺點是由于設備包含的文件或功能種類很多，如果將其圖標都顯示出來需要占用較多的屏幕空間，特別是對于屏幕有限的移動終端來說，過多的應用內容不可能全部同時展現出來，這就要求采用分層菜單的結構，這種分層結構往往是固定的，用戶必須熟悉菜單的所有構成，記憶各個功能在層級菜單中的對應位置。另外，采用分層菜單結構，會造成用戶無法進行直接操作使用，例如當用戶希望使用某項應用時，如果該應用所處菜單位置并非主菜單，就不能直接一步執行，而必須進入到該級菜單后才能選擇執行。以移動電話為例，根據相關研究統計發現，用戶在使用移動電話來執行常用功能時，需要按鍵的平均次數在3次以上，這便是由于固定的分層菜單結構造成的。如何為用戶提供一種更為快捷和方便的操作方式是需要進一步解決的問題。

多通道人機交互是根據以人為本的策略，讓用戶利用多個通道以自然、并行、協作的方式進行人機對話。例如：現在出現了語音UI(用戶界面)，如語音撥號，語音導航等，提供了一種與原有的鍵盤和鼠標不同的交互通道，方便了用戶的使用。但是我們很容易發現，由于語音的識別準確率普遍較低，并且受環境噪聲的影響很大，語音UI并不能適用于各種環境。另外由于人們的喜好不同，很多人并不適應在公眾場合對著機器說話。最為重要的是語音的差異變化范圍較大，對識別準確率和識別范圍的影響遠遠大于手寫的變化差異的影響，即手寫識別的范圍和識別準確率對不同用戶來說都是比較穩定的，而語音識別的波動較大。

因此，需要提供一種符合用戶使用習慣、方便并簡化用戶操作的人機交互的系統和方法。

發明內容

為了解決本發明的上述問題，提供了一種基于手寫識別的人機交互系統和方法，根據本發明的人機交互系統和方法，能夠方便用戶操作，符合用戶使用習慣，而且能夠彌補其他交互方式存在的不足。

根據本發明的一方面，基于手寫識別的人機交互系統包括：手寫輸入單元，用于對用戶手寫輸入的字符進行手寫筆跡數據采集；配置注冊單元，用于配置手寫執行功能的范圍、屬性，以及將手寫輸入字符注冊為自定義手寫字符；識別執行單元，用于對手寫輸入的字符進行識別，顯示并執行與手寫輸入字符對應的功能；存儲單元，用于存儲手寫輸入單元、配置注冊單元、識別執行單元操作需要的數據以及執行操作所生成的數據。

根據本發明的一方面，配置注冊單元使用手寫輸入單元采集的手寫筆跡數據，進行自定義手寫字符注冊或配置修改。

根據本發明的一方面，存儲單元存儲手寫輸入的字符的筆跡數據、特征模板、手寫輸入字符與功能的對應關系、功能屬性、多媒體資源和系統運行所需的中間結果。

根據本發明的一方面，配置單元中配置的執行功能的屬性包含該功能對應的名稱、序號、圖標、圖像或視頻。

其中，功能指功能集合，功能集合中包含的功能數目大于等于1。手寫字符包含圖案、單個字符、由多個字符組成的短語或句子。

根據本發明的一方面，識別執行單元包括：識別查詢單元，用于從手寫輸入單元提供的筆跡數據中提取特征，通過與存儲單元中存儲的特征模板或筆跡數據進行相似性比對來對輸入字符進行識別，給出候選字符組，以及與候選字符組對應的功能組；界面生成顯示單元，用于根據識別查詢單元識別查詢得到的功能組自動生成多媒體界面或者菜單列表，并顯示給用戶，以便用戶進行選擇；選擇執行單元，用于使用戶從界面生成顯示單元顯示的多媒體界面或者菜單中選擇要執行的功能，然后執行該功能，或者直接執行識別查詢單元提供的結果指代的功能。