[發明專利]由電子設備的用戶操縱動態推斷軟件操作的語音命令

在審

• 申請號: 201680016072.2
• 申請日: 2016-01-20
• 公開（公告）號: CN107408010A
• 公開（公告）日: 2017-11-28
• 發明（設計）人: 阿米特·庫馬爾·阿格拉沃爾;雷蒙德·B·埃西克;薩恰巴拉塔·勞特
• 申請（專利權）人: 谷歌技術控股有限責任公司
• 主分類號: G06F3/0484
• 分類號: G06F3/0484;G10L15/06;G10L25/48
• 代理公司: 中原信達知識產權代理有限責任公司11219
• 代理人: 李佳,穆德駿

技術領域

本公開通常涉及電子設備的用戶操作，更具體地說，涉及用于在電子設備處啟動操作的用戶語音命令。

背景技術

通常，用戶通過操縱呈現給用戶的各種可視元素，諸如電子設備的外殼上的物理按鈕或開關或經由電子設備的顯示屏呈現的虛擬按鈕和其他虛擬用戶可選元素，與電子設備進行交互。然而，為便于更有效交互，對于經由用戶發出的語音命令實現非接觸控制，已經進行了嘗試。實現該目標的持久障礙是通過電子設備上的一個或多個軟件應用，將語音發音精確的轉換成適當的交互序列。一種常見方法是提供用于典型的語音命令的語義特定應用編程接口(APIs)。然而，由于在可用的大量軟件之間缺少標準化，該方法通常將使用語音命令的用戶能力限定到在電子設備上安裝的軟件應用的非常小的子集。另一常見方法是將預定語音命令手動地映射到一系列操縱事件。該方法受到類似的限制，因為在大規模，特別是假定有大量軟件應用以及它們的不同版本上實現是不實際的。這些規模和一致性問題由此妨礙對能夠支持多個軟件應用的電子設備普遍采用語音控制。

附圖說明

通過參考附圖，本領域的技術人員可以更好地理解本公開，并且其多個特征和優點將對本領域的技術人員變得顯而易見。在不同圖中使用相同的參考符號表示類似或相同的項目。

圖1是示出根據本公開的至少一個實施例的將語音命令的動態推斷用于軟件操作的電子設備的圖。

圖2是示出根據本公開的至少一個實施例的圖1的電子設備的示例性硬件實現的圖。

圖3是示出根據本公開的至少一個實施例的圖1的電子設備的示例性系統實現的圖。

圖4是示出根據本公開的至少一個實施例，通過監視用戶觸覺操縱可視元素以啟動操作的實例，對電子設備處的軟件應用的操作動態地推斷語音命令集和相應的可視元素操縱序列的方法的流程圖。

圖5和6是示出根據本公開的至少一個實施例的圖4的方法的示例的圖。

圖7是示出根據本公開的至少一個實施例，通過監視用戶操縱可視元素，對跨電子設備上的多個軟件應用的操作，動態地推斷語音命令集和相應的可視元素操縱序列的方法的流程圖。

圖8是示出根據本公開的至少一個實施例的圖7的方法的示例的圖。

圖9是示出根據本公開的至少一個實施例，響應來自用戶的語音命令，對電子設備處的一個或多個軟件應用，執行用于制定操作實例的可視元素操縱序列的模擬的方法的流程圖。

圖10是示出根據本公開的至少一個實施例，通過分析與軟件應用相關聯的用戶幫助信息，對電子設備處的軟件應用的操作，動態地推斷語音命令集和相應的可視元素操縱序列的過程的概述的圖。

圖11和12是一起示出根據本公開的至少一個實施例，基于用戶幫助信息，分析用戶幫助信息以動態地推斷可視元素操縱序列和用于可視元素操縱序列的語音命令集的方法的圖。

圖13-18是示出根據本公開的至少一個實施例的圖11和12的方法的示例的圖。

圖19是示出根據本公開的至少一個實施例，對于在多個電子設備之間的軟件操作，共享動態推斷語音命令集和相應的可視元素操縱序列的系統的圖。

具體實施方式

下述描述旨在通過提供包含對于電子設備處的軟件操作動態推斷語音命令的多個具體實施例和細節，傳遞本公開的全面理解。然而，應理解到本公開不限于這些僅作為示例的具體的實施例和細節，因此，本公開的范圍旨在僅受下述權利要求及其等價物限定。進一步理解到，普通技術人員根據已知系統和方法，將認識到取決于具體設計和其他需要，出于旨在目的和利益，可將本公開用于多個替選實施例中。