[發明專利]一種輸入的方法及相關裝置

在審

• 申請號: 202010059940.3
• 申請日: 2020-01-19
• 公開（公告）號: CN113138674A
• 公開（公告）日: 2021-07-20
• 發明（設計）人: 龔良泉;葉祺
• 申請（專利權）人: 北京搜狗科技發展有限公司
• 主分類號: G06F3/023
• 分類號: G06F3/023;G06F3/041;G10L15/26
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 柳欣

本申請公開了一種輸入的方法及相關裝置，該方法包括：獲取多模態輸入信息，多模態輸入信息包括用戶輸入信息和輔助輸入信息；基于用戶輸入信息、輔助輸入信息和對應的特征提取器，獲得用戶輸入特征和輔助輸入特征；基于用戶輸入特征、輔助輸入特征和特征交互網絡，獲得用戶輸入信息對應的目標輸入內容。可見，在用戶輸入信息的基礎上，結合輔助輸入信息實現多模態輸入，輸入不再依賴于單模態的用戶輸入信息，而是感知更多輸入來源，通過用戶輸入特征和輔助輸入特征的特征交互實現多模態交互，聯合獲得準確性更高的用戶輸入信息對應的目標輸入內容，該輸入方式適用于復雜輸入環境，使得用戶輸入更加高效、更加智能，從而提高用戶輸入體驗。

技術領域

本申請涉及輸入法技術領域，尤其涉及一種輸入的方法及相關裝置。

背景技術

近年來，輸入法作為人機交互的關鍵環節得到快速發展，智能終端設備中大多數輸入法主要集中于鍵盤輸入、手寫輸入和語音輸入等。

發明人經過研究發現，目前輸入法一般是接收用戶預先確定的單模態的用戶輸入信息，上述鍵盤輸入、手寫輸入和語音輸入只有在安靜環境下輸入準確率較高，當在嘈雜、混亂場景下鍵盤輸入、手寫輸入和語音輸入的輸入錯誤率會由于周圍環境以及用戶自身因素的影響大大降低；而且上述鍵盤輸入、手寫輸入和語音輸入等也不能完全反映用戶與智能終端設備之間真正的人機交互，真正的人機交互不僅僅包括語言交互還包括非語言交互，比如面部表情或者手勢姿態等。即，上述鍵盤輸入、手寫輸入或語音輸入在復雜輸入環境中輸入效率低、輸入效果差，導致用戶輸入體驗差。

發明內容

本申請所要解決的技術問題是，提供一種輸入的方法及相關裝置，獲得準確性更高的用戶輸入信息對應的目標輸入內容，該輸入方式適用于復雜輸入環境，使得用戶輸入更加高效、更加智能，從而提高用戶輸入體驗。

第一方面，本申請實施例提供了一種輸入的方法，該方法包括：

獲取多模態輸入信息，所述多模態輸入信息包括用戶輸入信息和輔助輸入信息；

基于所述用戶輸入信息、所述輔助輸入信息和對應的特征提取器，獲得用戶輸入特征和輔助輸入特征；

基于所述用戶輸入特征、所述輔助輸入特征和特征交互網絡，獲得所述用戶輸入信息對應的目標輸入內容。

可選的，所述用戶輸入信息包括鍵盤輸入信息、手寫輸入信息或語音輸入信息；當所述用戶輸入信息包括鍵盤輸入信息時，所述用戶輸入特征包括鍵盤輸入特征；當所述用戶輸入信息包括手寫輸入信息時，所述用戶輸入特征包括手寫特征；當所述用戶輸入信息包括語音輸入信息時，所述用戶輸入特征包括語音特征。

可選的，所述輔助輸入信息包括傳感器輸入信息和/或視覺輸入信息；當所述輔助輸入信息包括傳感器輸入信息時，所述輔助輸入特征包括傳感器特征；當所述輔助輸入信息包括視覺輸入信息時，所述輔助輸入特征包括視覺特征；當所述輔助輸入信息包括傳感器輸入信息和視覺輸入信息時，所述輔助輸入特征包括傳感器特征和視覺特征。

可選的，所述特征提取器包括可訓練特征提取器、不可訓練特征提取器或混合特征提取器；其中，所述可訓練特征提取器是基于輸入信息樣本訓練淺層網絡或者深層網絡獲得的。

可選的，所述特征交互網絡是基于多模態輸入特征樣本訓練淺層網絡或者深層網絡獲得的。

可選的，所述方法還包括：

獲得用戶個性化特征；

對應地，所述基于所述用戶輸入特征、所述輔助輸入特征和特征交互網絡，獲得所述用戶輸入信息對應的目標輸入內容，具體為：

基于所述用戶個性化特征、所述用戶輸入特征、所述輔助輸入特征和特征交互網絡，獲得所述用戶輸入信息對應的目標輸入內容。

可選的，所述用戶個性化特征包括用戶個性化生理特征和/或用戶個性化行為特征。