[發明專利]根據用戶和自動化助理界面之間的距離來生成和/或適應自動化助理內容

在審

• 申請號: 201880094151.4
• 申請日: 2018-05-04
• 公開（公告）號: CN112204500A
• 公開（公告）日: 2021-01-08
• 發明（設計）人: 圖安·恩古耶;肯尼斯·米克斯特;元·袁
• 申請（專利權）人: 谷歌有限責任公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/03;G06F9/451
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 李寶泉;任慶威

提供了用于根據用戶相對于渲染自動化助理內容的自動化助理界面的距離來生成和/或適應自動化助理內容的方法、裝置、系統和計算機可讀介質。例如，自動化助理可以提供供客戶端設備渲染的數據。當用戶重新定位到離客戶端設備更近或更遠時，客戶端設備可以請求附加數據。在一些實施方式中，對附加數據的請求可以標識用戶與客戶端設備之間的距離。這樣，可以根據請求中的距離生成或選擇附加數據。其他實施方式可以允許自動化助理從環境中的一組用戶中確定活動用戶，并且確定活動用戶與客戶端設備之間的距離，以便可以為活動用戶定制任何渲染的內容。

背景技術

人們可以使用在本文中稱為“自動化助理”(也稱為“數字代理”、“聊天機器人”、“交互式個人助理”、“智能個人助理”、“助理應用”、“會話代理”等)的交互式軟件應用參與人機對話。例如，人們(當他們與自動化助理交互時，可以被稱為“用戶”)可以使用在一些情況下可以被轉換為文本然后進行處理的口頭自然語言輸入(即，話語)和/或通過提供文本(例如，鍵入的)自然語言輸入來向自動化助理提供命令和/或請求。自動化助理通過提供響應性用戶界面輸出(其可以包括可聽和/或可視的用戶界面輸出)來響應請求。

發明內容

申請人已經認識到，當自動化助理正使用戶界面輸出被渲染以呈現給用戶時(例如，響應于來自用戶的請求)，通常渲染用戶界面輸出而與用戶相對于渲染內容的用戶界面輸出設備的距離無關。結果，用戶可能無法從他/她當前的位置感知用戶界面輸出(例如，所顯示的輸出可能太小和/或可聽的輸出音量可能太低)。這可能使用戶需要重新定位并且提供請求再次渲染輸出的用戶界面輸入。處理這樣的用戶界面輸入和/或再次渲染內容可能導致過度消耗計算資源和/或網絡資源。此外，對于靈活性低的用戶，他們可能難以重新定位到可以感知用戶界面輸入的位置。附加地或可替代地，作為與用戶的距離無關地渲染輸出的結果，可以以比所需的計算成本更高的方式來渲染來自自動化助理的用戶界面輸出。例如，可以以比所需更高的音量渲染可聽輸出和/或在比經由單幀顯示多個幀的內容更長的持續時間內，經由多個幀顯示所顯示的輸出。

此外，申請人已經認識到，當正在渲染用戶界面輸出時，用戶可能會重新定位，從而潛在地中斷了用戶感知來自自動化助理的進一步輸出的能力。此外，當自動化助理正使特定的客戶端設備提供輸出并且用戶移近客戶端設備時，由于用戶靠近客戶端設備的特定接口，因此用戶可能希望感知更多的輸出。但是，由于許多自動化助理通常不了解用戶距離，因此它們可能導致計算資源浪費被浪費在用戶可能無法感知的渲染輸出上。此外，考慮到用戶可以感知輸出的方式的數量，當渲染輸出不適合附近的用戶時，可能無法有效地利用計算資源。

本文公開的實施方式涉及用于根據至少一個用戶相對于渲染自動化助理內容的自動化助理界面的距離來生成和/或適應自動化助理內容的方法、裝置和計算機可讀介質(暫時性和非暫時性)。根據至少一個用戶的距離生成自動化助理內容的一些實施方式基于生成包括基于當前確定的用戶距離的距離度量的代理請求而生成內容。可以基于來自一個或多個傳感器，諸如視覺傳感器(例如，單鏡頭相機、立體相機)、專用距離傳感器(例如，激光測距儀)、麥克風(例如，使用波束成形和/或其他技術)的信號來確定用戶的當前距離。此外，將代理請求提交給相應的代理，并且相應的代理利用適合于距離度量的代理數據來響應該代理請求。然后，自動化助理可以將代理數據(或其轉換)作為用于渲染的內容提供給用戶。由于內容適合于該距離度量，并且易于由用戶在他/她當前的距離感知，因此可以改善用戶與自動化助理的交互。此外，代理數據可以是可用于該請求的候選代理數據的子集，其中，基于該子集與代理請求的距離度量的一致性，由代理選擇該子集。以這些和其他方式，代替全部候選代理數據(這將需要更大的網絡資源來發送)，代理僅提供候選代理數據的子集。此外，代替全部候選代理數據(或其轉換)，渲染內容的自動化助理客戶端設備可以僅接收代理數據的子集(或其轉換)。適合于距離度量的內容的特定性質可以確保有效使用在運行自動化助理的計算裝置(諸如用戶設備)處的計算資源和其他硬件資源。這至少是因為避免了實現用戶無法感知的助理的潛在的高計算成本的能力。例如，可以節省網絡資源(例如，僅將子集發送到客戶端設備)、客戶端設備處的存儲器資源(例如，僅在客戶端設備處緩存子集)和/或客戶端設備處的處理器和/或功率資源(例如，僅渲染部分或全部子集)。