[發(fā)明專利]減少由切換輸入模態(tài)所引起的延遲

在審

• 申請(qǐng)?zhí)枺?/td>: 202011261069.1
• 申請(qǐng)日: 2016-09-09
• 公開(kāi)（公告）號(hào): CN112463938A
• 公開(kāi)（公告）日: 2021-03-09
• 發(fā)明（設(shè)計(jì)）人: 德魯夫·巴克希;扎希德·撒布爾
• 申請(qǐng)（專利權(quán)）人: 谷歌有限責(zé)任公司
• 主分類號(hào): G06F16/332
• 分類號(hào): G06F16/332;G06F40/30;G10L15/22;G06F9/451;G10L15/30
• 代理公司: 中原信達(dá)知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11219
• 代理人: 李佳;鄧聰惠

本文涉及減少由切換輸入模態(tài)所引起的延遲。在各種實(shí)施方式中，可以由電子設(shè)備所提供的多模態(tài)接口的第一模態(tài)接收第一輸入，諸如文本輸入。響應(yīng)于所述第一輸入滿足一個(gè)或多個(gè)準(zhǔn)則的確定，所述電子設(shè)備可以以搶先方式在所述電子設(shè)備與查詢處理器之間建立會(huì)話，所述查詢處理器被配置成處理以所述多模態(tài)接口的第二模態(tài)所接收的輸入(例如，語(yǔ)音輸入)。在各種實(shí)施方式中，所述電子設(shè)備可以所述多模態(tài)接口的所述第二模態(tài)接收第二輸入(例如，語(yǔ)音輸入)，在所述會(huì)話內(nèi)發(fā)起在所述查詢處理器處對(duì)所述第二輸入的至少一部分的處理，以及基于來(lái)自所述查詢處理器的輸出來(lái)構(gòu)建完整的查詢。

本申請(qǐng)是分案申請(qǐng)，原案的申請(qǐng)?zhí)柺?01610812805.5，申請(qǐng)日是2016年9月9日，發(fā)明名稱是“減少由切換輸入模態(tài)所引起的延遲”。

技術(shù)領(lǐng)域

本說(shuō)明書一般地針對(duì)促進(jìn)在輸入模態(tài)之間切換時(shí)對(duì)用戶經(jīng)歷的延遲的減少和/或消除的各種實(shí)施方式，尤其是在用戶從低延遲輸入模態(tài)切換到高延遲輸入模態(tài)的情況下。

背景技術(shù)

基于語(yǔ)音的用戶接口越來(lái)越廣泛地被使用于對(duì)計(jì)算機(jī)以及其他電子設(shè)備的控制。基于語(yǔ)音的用戶接口的一種特別有益的應(yīng)用是采用便攜式電子設(shè)備，諸如移動(dòng)電話、手表、平板計(jì)算機(jī)、頭戴式設(shè)備、虛擬或增強(qiáng)現(xiàn)實(shí)設(shè)備等。另一種有益應(yīng)用是采用車載電子系統(tǒng)，諸如合并導(dǎo)航與音頻性能的汽車系統(tǒng)。這樣的應(yīng)用的特點(diǎn)通常在于非傳統(tǒng)形式的因素，所述因素限制了更加傳統(tǒng)的鍵盤或觸摸屏輸入的功用和/或在期望鼓勵(lì)用戶持續(xù)專注于其他任務(wù)的情形下的使用，諸如當(dāng)用戶正在開(kāi)車或行走時(shí)。

例如，在處理器和/或存儲(chǔ)器資源方面，基于語(yǔ)音的用戶接口的計(jì)算資源需求可能相當(dāng)大量。作為結(jié)果，一些常規(guī)的基于語(yǔ)音的用戶接口方法采用客戶端-服務(wù)器架構(gòu)，其中由相對(duì)功率較低的客戶端設(shè)備接收和記錄語(yǔ)音輸入，通過(guò)諸如互聯(lián)網(wǎng)的網(wǎng)絡(luò)將該記錄傳送至用于語(yǔ)音到文本轉(zhuǎn)換以及語(yǔ)義處理的在線服務(wù)，并且由在線服務(wù)生成適當(dāng)響應(yīng)并且將其傳送回客戶端設(shè)備。在線服務(wù)能夠投入大量的計(jì)算資源來(lái)處理語(yǔ)音輸入，能夠?qū)崿F(xiàn)比以其他方式在客戶端設(shè)備內(nèi)本地實(shí)現(xiàn)更加復(fù)雜的話音識(shí)別和語(yǔ)義分析功能。然而，客戶端-服務(wù)器方法必定要求客戶端在處理語(yǔ)音輸入時(shí)在線(即，與在線服務(wù)進(jìn)行通信)。保持這樣的客戶端與在線服務(wù)之間的連接性可能會(huì)不切實(shí)際，特別是在無(wú)線信號(hào)強(qiáng)度無(wú)疑會(huì)發(fā)生波動(dòng)的移動(dòng)和汽車應(yīng)用中。因此，當(dāng)需要使用在線服務(wù)將語(yǔ)音輸入轉(zhuǎn)換成文本時(shí)，必須在客戶端與服務(wù)器之間建立語(yǔ)音到文本轉(zhuǎn)換會(huì)話。在建立這樣的會(huì)話的同時(shí)，用戶可能經(jīng)歷明顯的延遲，例如，1至2秒或更長(zhǎng)時(shí)間，這可能會(huì)有損于用戶體驗(yàn)。

發(fā)明內(nèi)容

本說(shuō)明書一般地針對(duì)促進(jìn)在輸入模態(tài)之間切換時(shí)對(duì)用戶經(jīng)歷的延遲的減少和/或消除的各種實(shí)施方式，尤其是在用戶從低延遲輸入模態(tài)切換到高延遲輸入模態(tài)的情況下。例如，在一些實(shí)施方式中，當(dāng)環(huán)境指示經(jīng)由低延遲輸入模態(tài)提供輸入(例如，文本)的用戶有可能切換到語(yǔ)音輸入時(shí)，可以以搶先方式建立語(yǔ)音到文本轉(zhuǎn)換會(huì)話。

因此，在一些實(shí)施方式中，一種方法可以包括以下操作：以與電子設(shè)備相關(guān)聯(lián)的多模態(tài)接口的第一模態(tài)接收第一輸入，并且響應(yīng)于接收所述第一輸入：確定所述第一輸入滿足準(zhǔn)則；響應(yīng)于所述第一輸入滿足準(zhǔn)則的確定，以搶先方式在所述電子設(shè)備與查詢處理器之間建立會(huì)話，所述查詢處理器被配置成處理以所述多模態(tài)接口的第二模態(tài)所接收的輸入；以所述多模態(tài)接口的所述第二模態(tài)接收第二輸入；在所述會(huì)話內(nèi)發(fā)起在所述查詢處理器處對(duì)所述第二輸入的至少一部分的處理；以及基于來(lái)自所述查詢處理器的輸出而構(gòu)建完整的查詢。

在一些實(shí)施方式中，一種方法可以包括以下操作：用支持語(yǔ)音的設(shè)備接收文本輸入；以及在所述支持語(yǔ)音的設(shè)備中，并且響應(yīng)于接收所述文本輸入：確定所述文本輸入滿足準(zhǔn)則；響應(yīng)于所述文本輸入滿足準(zhǔn)則的確定，以搶先方式在所述支持語(yǔ)音的設(shè)備與語(yǔ)音到文本轉(zhuǎn)換處理器之間建立語(yǔ)音到文本轉(zhuǎn)換會(huì)話；接收語(yǔ)音輸入；在所述會(huì)話內(nèi)發(fā)起在所述語(yǔ)音到文本轉(zhuǎn)換處理器處對(duì)所述語(yǔ)音輸入的至少一部分的處理；以及基于來(lái)自所述語(yǔ)音到文本轉(zhuǎn)換處理器的輸出來(lái)構(gòu)建完整的查詢。