[發明專利]基于聲音識別的讀屏應用指令輸入方法及裝置

在審

• 申請號: 201610313019.0
• 申請日: 2016-05-12
• 公開（公告）號: CN105788597A
• 公開（公告）日: 2016-07-20
• 發明（設計）人: 梁振宇;張昆
• 申請（專利權）人: 深圳市聯諦信息無障礙有限責任公司
• 主分類號: G10L15/22
• 分類號: G10L15/22;G10L15/02;G10L15/26;G06F3/16;H04M1/725
• 代理公司: 廣州三環專利代理有限公司 44202
• 代理人: 郝傳鑫;熊永強

技術領域

本發明涉及人機交互技術領域，尤其涉及一種基于聲音識別的讀屏應用指 令輸入方法及裝置。

背景技術

隨著智能手機、個人電腦等計算機設備的快速普及，各種移動互聯網應用 也層出不窮，越來越多的用戶能夠真實感受到移動互聯技術帶來的生活便利和 無線樂趣；但是，社會中還有一部分特殊群體也需要使用智能手機等計算機設 備，那就是有一定功能障礙的人群，例如視障人群，尤其是全盲的視障群體， 完全是靠耳朵聽取聲音來操作計算機。

在使用智能手機、平板電腦、個人電腦等終端設備的輔助操作功能(包括 但不限于Voiceover、Talkback等讀屏軟件和其他類似功能的應用)時，用戶界 面元素及其功能會被提取出來并通過TTS(TexttoSpeech，文字轉語音技術) 把所選擇的文字用語音播放出來，以幫助用戶了解手機屏幕當前顯示的內容； 并且，用戶可以通過在觸摸屏上進行點擊、滑動等操作，對終端進行操作，給 用戶帶來了更全面更豐富的使用體驗，尤其是使得存在一定功能障礙的人群(例 如視覺障礙的殘障人員、老年人等特殊群體)能夠無障礙的使用智能手機等終 端設備。

也就是說，用戶必須手持智能手機、鼠標等輸入設備才能對終端進行操作。 以智能手機為例，對于用戶來講，就算有語音的輔助，也需要用戶用手指在顯 示界面上進行多次點擊或者滑動操作。另外，若手機不在身邊，則無法進行操 作，使得用戶使用智能手機等終端設備的使用體驗不佳。進一步地，對于存在 一定功能障礙的人群(例如視覺障礙的殘障人員、老年人等特殊群體)來講， 要準確快速的尋找手機也存在一定的問題，這就造成了存在一定功能障礙的人 群(例如視覺障礙的殘障人員、老年人等特殊群體)在使用手機時操作的便利 性不足。

發明內容

基于此，為解決傳統技術中的智能手機等終端設備的操作方式存在的操作 的便利性不足的技術問題，特提出了一種基于聲音識別的讀屏應用指令輸入方 法。

一種基于聲音識別的讀屏應用指令輸入方法，包括：

獲取麥克風采集的音頻數據；

獲取與所述音頻數據對應的特征數據；

在預設的動作/手勢數據庫中查找與所述特征數據匹配的目標動作/手勢；

確定與所述目標動作/手勢對應的讀屏功能操作，執行所述讀屏功能操作。

可選的，在其中一個實施例中，所述執行所述讀屏功能操作的步驟之后還 包括：獲取所述讀屏功能操作的執行結果；在所述預設的語音數據庫中查找與 所述讀屏功能操作的執行結果對應的語音提示消息；播放所述語音提示消息。

可選的，在其中一個實施例中，所述獲取與所述音頻數據對應的特征數據 的步驟具體為：提取與所述音頻數據對應的語音數據，獲取與所述語音數據對 應的文本數據作為特征數據；所述在預設的動作/手勢數據庫中查找與所述特征 數據匹配的目標動作/手勢的步驟具體為：以所述文本數據作為關鍵字，在所述 預設的動作/手勢數據庫中查找與所述關鍵字匹配的目標動作/手勢。

可選的，在其中一個實施例中，所述在預設的動作/手勢數據庫中查找與所 述特征數據匹配的目標動作/手勢的步驟之后還包括：獲取終端的當前顯示界面， 獲取所述當前顯示界面的讀屏功能選中框；所述確定與所述目標動作/手勢對應 的讀屏功能操作的步驟具體為：根據所述當前顯示界面的讀屏功能選中框確定 與所述目標動作/手勢對應的讀屏功能操作。

可選的，在其中一個實施例中，所述讀屏功能操作為音頻應用開啟操作； 所述執行所述讀屏功能操作的步驟具體為：根據所述音頻應用開啟操作啟動與 所述音頻應用開啟操作對應的音頻應用。

可選的，在其中一個實施例中，所述確定與所述目標動作/手勢對應的讀屏 功能操作的步驟具體為：將所述目標動作/手勢發送給讀屏應用，所述讀屏應用 用于根據所述目標動作/手勢在所述預設的讀屏功能操作數據庫中查找與所述目 標動作/手勢匹配的讀屏功能操作。

可選的，在其中一個實施例中，所述獲取麥克風采集的音頻數據的步驟之 前還包括：接收用戶輸入的讀屏應用開啟指令，所述讀屏應用開啟指令與所述 讀屏應用對應，根據所述讀屏應用開啟指令啟動所述讀屏應用。