[發明專利]利用環境上下文以用于增強的通信吞吐量

有效

• 申請號: 201780043799.4
• 申請日: 2017-07-10
• 公開（公告）號: CN109478106B
• 公開（公告）日: 2022-11-15
• 發明（設計）人: M·莫里斯;S·K·卡內
• 申請（專利權）人: 微軟技術許可有限責任公司
• 主分類號: G06F3/023
• 分類號: G06F3/023
• 代理公司: 北京世輝律師事務所 16093
• 代理人: 李崢宇

1.一種用于通過減少產生通信的通信吞吐量時間或增加產生通信的通信吞吐率的、針對至少一個用戶的改進的通信吞吐量的系統，所述系統包括：

一個或多個相機；

一個或多個麥克風；

一個或多個處理器；

人機接口；以及

計算機可讀介質，其上存儲有計算機可執行指令，所述計算機可執行指令在由所述一個或多個處理器執行時，將所述系統配置為執行操作，所述操作包括：

通過所述一個或多個相機獲取圖像；

獲取針對所述圖像中的對象的顯著對象標簽；

經由所述一個或多個麥克風捕獲音頻數據；

基于所述音頻數據來確定會話上下文，所述會話上下文包括語法信息、語義信息和關鍵字中的一項或多項；

基于所述顯著對象標簽來生成預測單詞；

基于所述預測單詞、所述顯著對象標簽、所述圖像中的所述對象和所述會話上下文來生成預測短語；

從所述預測單詞和所述預測短語中選擇一個或多個建議話語；以及

經由所述人機接口輸出所述一個或多個建議話語的表示，由此通過減少產生通信的所述通信吞吐量時間或增加產生通信的所述通信吞吐率來提供針對所述至少一個用戶的改進的通信吞吐量。

2.根據權利要求1所述的系統，所述輸出包括：

經由所述人機接口繪出所述圖像；以及

將所述一個或多個建議話語的所述表示繪出為一個或多個標簽，所述一個或多個標簽被顯示為所述圖像中與所述對象對應的位置之上的一個或多個疊加標簽。

3.根據權利要求1所述的系統，所述輸出包括：

以下一項或多項：

經由所述人機接口將所述一個或多個建議話語繪出為符號、單詞或短語完成，

經由所述人機接口將所述一個或多個建議話語繪出為繪出鍵盤的一部分，

在所述人機接口的專用部分處繪出，或者

經由所述人機接口繪出所述一個或多個建議話語的圖形表示。

4.根據權利要求1所述的系統，所述人機接口包括顯示器，并且向所述人機接口輸出所述一個或多個建議話語包括：

在所述顯示器的專用于環境上下文預測單詞或短語的指定區域中，繪出所述一個或多個建議話語的、對應于與用戶的周圍相關的預測單詞或短語的一部分；

基于與所述用戶的所述周圍的相關性來對所述一個或多個建議話語的剩余部分排名；以及

在所述顯示器處、在所述指定區域之外以與所述排名對應的順序繪出所述剩余部分，所述剩余部分被顯示為所述圖像中與所述用戶的所述周圍對應的位置之上的一個或多個疊加標簽。

5.根據權利要求1所述的系統，所述操作還包括：

接收指示對所述一個或多個建議話語的單詞或短語的選擇的輸入；

向以下一項或多項供應輸出選擇的所述單詞或所述短語：

網絡接口，

被存儲在所述計算機可讀介質上的應用，或者

所述人機接口。

6.根據權利要求5所述的系統，其中接收指示選擇的輸入包括：

通過所述一個或多個相機獲取注視數據；以及

將所述注視數據與所述人機接口的離散部分關聯，所述離散部分與所述預測單詞或預測短語中的一項對應。

7.根據權利要求1所述的系統，其中以下至少一項進一步基于所述會話上下文：生成所述預測單詞，選擇所述一個或多個建議話語，以及經由所述人機接口輸出所述一個或多個建議話語。

8.根據權利要求1所述的系統，所述操作還包括：

捕獲所述系統的用戶的注視數據；

基于所述注視數據來標識所述顯著對象或者所述人機接口的一部分中的至少一項；并且

其中以下至少一項進一步基于所述標識：

生成所述預測單詞，

生成所述預測短語，

選擇所述一個或多個建議話語，或者

經由所述人機接口輸出所述一個或多個建議話語。