[發(fā)明專(zhuān)利]將多模態(tài)環(huán)境數(shù)據(jù)動(dòng)態(tài)地分配給助理動(dòng)作請(qǐng)求以便與后續(xù)請(qǐng)求相關(guān)

在審

• 申請(qǐng)?zhí)枺?/td>: 201980092017.5
• 申請(qǐng)日: 2019-05-31
• 公開(kāi)（公告）號(hào): CN113424145A
• 公開(kāi)（公告）日: 2021-09-21
• 發(fā)明（設(shè)計(jì)）人: 安德魯·加拉格爾;卡羅琳·潘托法魯;維奈·貝塔達(dá)普拉;烏特薩夫·普拉布
• 申請(qǐng)（專(zhuān)利權(quán)）人: 谷歌有限責(zé)任公司
• 主分類(lèi)號(hào): G06F3/16
• 分類(lèi)號(hào): G06F3/16
• 代理公司: 中原信達(dá)知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11219
• 代理人: 鄧聰惠;周亞榮

本文中所闡述的實(shí)現(xiàn)方式涉及一種自動(dòng)化助理，該自動(dòng)化助理使用基于輸入的環(huán)境條件生成的環(huán)境條件數(shù)據(jù)來(lái)確定所述輸入是否應(yīng)該影響由特定用戶初始化的動(dòng)作。所述自動(dòng)化助理可以允許每個(gè)用戶在無(wú)需中斷以征求明確的用戶認(rèn)證的環(huán)境下操縱其相應(yīng)的正在進(jìn)行的動(dòng)作。例如，當(dāng)一組人中的個(gè)人與所述自動(dòng)化助理交互以初始化或影響特定的正在進(jìn)行的動(dòng)作時(shí)，所述自動(dòng)化助理可以生成將所述個(gè)人與所述特定的正在進(jìn)行的動(dòng)作相關(guān)的數(shù)據(jù)。可以使用各種不同的輸入模態(tài)來(lái)生成數(shù)據(jù)，可以基于所述個(gè)人的不斷變化的環(huán)境來(lái)動(dòng)態(tài)地選擇所述輸入模態(tài)。因此，每當(dāng)用戶提供了用于修改正在進(jìn)行的動(dòng)作和/或初始化另一動(dòng)作的輸入時(shí)都可以處理不同的輸入模態(tài)集合。

背景技術(shù)

人類(lèi)可以參與利用交互式軟件應(yīng)用的人類(lèi)與計(jì)算機(jī)對(duì)話，該交互式軟件應(yīng)用在本文中被稱(chēng)為“自動(dòng)化助理”(也被稱(chēng)為“數(shù)字代理”、“聊天機(jī)器人”、“交互式個(gè)人助理”、“智能個(gè)人助理”、“會(huì)話代理”等)。例如，人類(lèi)(人類(lèi)在其與自動(dòng)化助理交互時(shí)可以被稱(chēng)為“用戶”)可以使用口述自然語(yǔ)言輸入(即，話語(yǔ))(在一些情況下可以將該口述自然語(yǔ)言輸入轉(zhuǎn)換成文本，然后進(jìn)行處理)和/或通過(guò)提供文本(例如，打字的)自然語(yǔ)言輸入來(lái)提供命令和/或請(qǐng)求。

在一些實(shí)例中，自動(dòng)化助理可以在存在多個(gè)不同用戶并且這些用戶嘗試與自動(dòng)化助理交互的各種不同的語(yǔ)境中進(jìn)行操作。然而，由于缺乏一些自動(dòng)化助理的多功能性，尋求與自動(dòng)化助理交互(例如，以檢索公共數(shù)據(jù)和/或調(diào)用非訪問(wèn)受限動(dòng)作)的訪客用戶可以經(jīng)歷與自動(dòng)化助理交互的問(wèn)題。例如，可以不將提供對(duì)在特定時(shí)間發(fā)出警報(bào)的請(qǐng)求的訪客用戶指定為唯一的具有修改警報(bào)的權(quán)限的用戶。因此，其它訪客用戶可能能夠在警報(bào)響起之前修改警報(bào)。當(dāng)多個(gè)訪客用戶正在嘗試編輯其已經(jīng)初始化的某些相應(yīng)動(dòng)作時(shí)，這些環(huán)境可以惡化，但自動(dòng)化助理不清楚哪個(gè)用戶正在嘗試修改特定的正在進(jìn)行的動(dòng)作。因此，當(dāng)錯(cuò)誤標(biāo)識(shí)到并且無(wú)意修改了動(dòng)作時(shí)，計(jì)算資源可能會(huì)被浪費(fèi)。此外，當(dāng)用戶提供后續(xù)命令以將自動(dòng)化助理引導(dǎo)到受影響的動(dòng)作時(shí)，可能會(huì)浪費(fèi)附加計(jì)算資源。

發(fā)明內(nèi)容

本文中所闡述的實(shí)現(xiàn)方式涉及一種使用環(huán)境條件的實(shí)例以便初始化和/或修改用戶所請(qǐng)求的某些動(dòng)作的自動(dòng)化助理。自動(dòng)化助理可以使用環(huán)境條件來(lái)標(biāo)識(shí)正在提供特定輸入的用戶，并且將特定輸入與先前在類(lèi)似環(huán)境條件下初始化的動(dòng)作相關(guān)。在自動(dòng)化助理將要接收來(lái)自不同用戶(例如，“訪客”用戶)的輸入以便初始化不同動(dòng)作的環(huán)境中，自動(dòng)化助理可以動(dòng)態(tài)地選擇用于檢測(cè)與不同用戶相關(guān)聯(lián)的環(huán)境條件的模態(tài)，作為此類(lèi)用戶的改變的語(yǔ)境。以這種方式，可以通過(guò)提供可以用于將用戶與動(dòng)作相關(guān)的各種模態(tài)組合來(lái)保存計(jì)算資源。此外，通過(guò)允許自動(dòng)化助理動(dòng)態(tài)地選擇用于將用戶與正在進(jìn)行的動(dòng)作相關(guān)的模態(tài)，可以減輕因?qū)⒂脩裘铄e(cuò)誤地分配給其它用戶所請(qǐng)求的動(dòng)作而產(chǎn)生的錯(cuò)誤。減輕此類(lèi)錯(cuò)誤可以進(jìn)一步保存計(jì)算資源，否則在校正由此類(lèi)錯(cuò)誤分配無(wú)意中初始化的任何動(dòng)作時(shí)可能會(huì)消耗這些計(jì)算資源。

本文中所闡述的實(shí)現(xiàn)方式涉及一種根據(jù)提供來(lái)自不同用戶的各種輸入的環(huán)境來(lái)編排此類(lèi)輸入的自動(dòng)化助理。在一些實(shí)現(xiàn)方式中，可以將各種環(huán)境條件與特定用戶和/或該特定用戶所請(qǐng)求的特定動(dòng)作相關(guān)。以這種方式，可以將任何后續(xù)輸入與先前的環(huán)境條件相關(guān)，以供自動(dòng)化助理在不通過(guò)例如請(qǐng)求未經(jīng)認(rèn)證的用戶對(duì)其自身進(jìn)行認(rèn)證來(lái)延遲響應(yīng)的情況下生成合適響應(yīng)。這種繞過(guò)將另外響應(yīng)于某些用戶輸入而請(qǐng)求的明顯認(rèn)證的做法可以減輕可在來(lái)自用戶的請(qǐng)求和來(lái)自自動(dòng)化助理的響應(yīng)動(dòng)作(例如，智能裝置的聽(tīng)覺(jué)和/或圖形響應(yīng)和/或控制)之間展現(xiàn)的延遲。此外，這種做法在多個(gè)用戶正在與相同自動(dòng)化助理交互但不請(qǐng)求進(jìn)行使用私人數(shù)據(jù)的任何動(dòng)作的情況下特別有用。

例如，當(dāng)?shù)谝辉L客用戶位于另一用戶的家中時(shí)，第一訪客用戶可以從另一用戶的家中的計(jì)算裝置調(diào)用自動(dòng)化助理以便為當(dāng)天稍晚的時(shí)間創(chuàng)建提醒。為了創(chuàng)建提醒，第一訪客用戶可以提供口述話語(yǔ)，諸如，“Assistant,remind me to call my Dad at 3:00 PMtoday(助理，提醒我今天下午3:00呼叫我父親)”。作為響應(yīng)，自動(dòng)化助理可以使環(huán)境數(shù)據(jù)得以生成以表征第一訪客用戶提供了口述話語(yǔ)的任何環(huán)境條件以及提醒數(shù)據(jù)，該提醒數(shù)據(jù)表征了所請(qǐng)求的提醒。此外，自動(dòng)化助理可以使環(huán)境數(shù)據(jù)和提醒數(shù)據(jù)得以彼此相關(guān)地存儲(chǔ)(例如，存儲(chǔ)在計(jì)算裝置處)。