[發(fā)明專利]語音控制用戶界面的方法及裝置有效
| 申請?zhí)枺?/td> | 201210527881.3 | 申請日: | 2012-12-10 |
| 公開(公告)號: | CN103869931A | 公開(公告)日: | 2014-06-18 |
| 發(fā)明(設(shè)計)人: | 王成軍 | 申請(專利權(quán))人: | 三星電子(中國)研發(fā)中心;三星電子株式會社 |
| 主分類號: | G06F3/01 | 分類號: | G06F3/01;G06F3/0482 |
| 代理公司: | 北京德琦知識產(chǎn)權(quán)代理有限公司 11018 | 代理人: | 謝安昆;宋志強 |
| 地址: | 210019 江蘇省南京*** | 國省代碼: | 江蘇;32 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 語音 控制 用戶界面 方法 裝置 | ||
1.一種語音控制用戶界面的方法,其特征在于,該方法包括:
當(dāng)一用戶界面即將載入運行時,遍歷該用戶界面上的元素,分別從每個元素中抽取該元素的標(biāo)簽,將抽取的所有界面元素標(biāo)簽保存到運行時標(biāo)簽庫;
當(dāng)接收到用戶輸入的語音時,將該語音與運行時標(biāo)簽庫中的各界面元素標(biāo)簽一一匹配,若匹配上,則對匹配的元素標(biāo)簽進(jìn)行語義分析,根據(jù)語義分析結(jié)果對界面元素進(jìn)行預(yù)定義的操作。
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述分別從每個元素中抽取該元素的標(biāo)簽為:
當(dāng)界面元素為下拉列表時,抽取該下拉列表的各列表項文本作為該下拉列表的標(biāo)簽;
當(dāng)界面元素為文本框時,抽取該文本框的預(yù)設(shè)的只讀顏色的文本作為該文本框的標(biāo)簽;
當(dāng)界面元素為文本區(qū)域時,抽取該文本區(qū)域的預(yù)設(shè)的只讀顏色的文本作為該文本區(qū)域的標(biāo)簽;
當(dāng)界面元素為列表框時,抽取該列表框中各個欄目item對應(yīng)的單item文本或多個子item文本作為該列表框的標(biāo)簽;
當(dāng)界面元素為網(wǎng)格視圖時,抽取該網(wǎng)格視圖中各個item對應(yīng)的單item文本或多個子item文本作為該網(wǎng)格視圖的標(biāo)簽;
當(dāng)界面元素為復(fù)選框時,抽取該復(fù)選框中各個item對應(yīng)的單item文本或多個子item文本作為該復(fù)選框的標(biāo)簽;
當(dāng)界面元素為單選按鈕時,抽取該單選按鈕中各個item對應(yīng)的單item文本或多個子item文本作為該單選框的標(biāo)簽;
當(dāng)界面元素為按鈕時,抽取該按鈕上的文字作為該按鈕的標(biāo)簽;
當(dāng)界面元素為拖動條時,抽取該拖動條的描述性標(biāo)記label作為該拖動條的標(biāo)簽;
當(dāng)界面元素為日期和時間控件時,抽取該控件的描述性label作為該控件的標(biāo)簽;
當(dāng)界面元素為圖片切換控件或滾動視圖控件時,當(dāng)該控件未聚焦時,若該控件自帶描述性label,則抽取該描述性label作為該控件的標(biāo)簽,若該控件不帶描述性label,則將為該控件預(yù)設(shè)的標(biāo)簽作為該控件的標(biāo)簽;當(dāng)該控件聚焦時,抽取控件的用戶界面動作作為該控件的標(biāo)簽;
當(dāng)界面元素為組編輯區(qū)域時,對于每個窗口小部件widget的每個可編輯區(qū)域,若該可編輯區(qū)域自帶描述性label,則抽取該描述性label作為該可編輯區(qū)域的標(biāo)簽,否則,抽取該可編輯區(qū)域所屬的widget的描述性label作為該可編輯區(qū)域的標(biāo)簽。
3.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述遍歷該用戶界面上的元素為:
對于每個即將載入運行的用戶界面,分別遍歷各用戶界面上的元素;
或者,只遍歷最前端的活動界面上的元素。
4.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述匹配上為:完全匹配上;
且,所述將該語音與運行時標(biāo)簽庫中的各界面元素標(biāo)簽一一匹配之后進(jìn)一步包括:若語音的一部分與一界面元素標(biāo)簽匹配上,則對匹配的元素標(biāo)簽進(jìn)行語義分析,根據(jù)語義分析結(jié)果對界面元素進(jìn)行預(yù)定義的操作,然后將語音的另一部分作為該界面元素的內(nèi)容輸入。
5.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述將該語音與運行時標(biāo)簽庫中的各界面元素標(biāo)簽一一匹配之后進(jìn)一步包括:若未匹配上,則判斷當(dāng)前可視用戶界面上是否有可輸入的聚焦元素,若是,則將語音作為該元素的內(nèi)容輸入;否則,丟棄該語音。
6.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述將該語音與運行時標(biāo)簽庫中的各界面元素標(biāo)簽一一匹配為:
將該語音與運行時標(biāo)簽庫中屬于當(dāng)前可視范圍內(nèi)的各界面元素的標(biāo)簽一一匹配。
7.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述匹配上之后、對匹配的元素標(biāo)簽進(jìn)行語義分析之前進(jìn)一步包括:
判斷匹配的標(biāo)簽是否可見,若是,執(zhí)行所述對匹配的元素標(biāo)簽進(jìn)行語義分析的動作;否則,不作進(jìn)一步處理。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于三星電子(中國)研發(fā)中心;三星電子株式會社,未經(jīng)三星電子(中國)研發(fā)中心;三星電子株式會社許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201210527881.3/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 上一篇:信息處理的方法和終端設(shè)備
- 下一篇:一種茶葉包裝禮盒
- 同類專利
- 專利分類
G06F 電數(shù)字?jǐn)?shù)據(jù)處理
G06F3-00 用于將所要處理的數(shù)據(jù)轉(zhuǎn)變成為計算機能夠處理的形式的輸入裝置;用于將數(shù)據(jù)從處理機傳送到輸出設(shè)備的輸出裝置,例如,接口裝置
G06F3-01 .用于用戶和計算機之間交互的輸入裝置或輸入和輸出組合裝置
G06F3-05 .在規(guī)定的時間間隔上,利用模擬量取樣的數(shù)字輸入
G06F3-06 .來自記錄載體的數(shù)字輸入,或者到記錄載體上去的數(shù)字輸出
G06F3-09 .到打字機上去的數(shù)字輸出
G06F3-12 .到打印裝置上去的數(shù)字輸出





