[發明專利]低延遲鄰近群組翻譯

在審

• 申請號: 201880094315.3
• 申請日: 2018-04-11
• 公開（公告）號: CN112236817A
• 公開（公告）日: 2021-01-15
• 發明（設計）人: S.冼;D.程
• 申請（專利權）人: 谷歌有限責任公司
• 主分類號: G10L15/30
• 分類號: G10L15/30;G06F40/58;G10L15/22
• 代理公司: 北京市柳沈律師事務所 11105
• 代理人: 金玉潔

本地無線網絡用于在說兩種以上不同語言的用戶之間建立多語言翻譯群組，使得當一個用戶對他或她的計算設備發言時，該用戶的計算設備可以執行自動語音識別，在某些情況下，執行到不同語言的翻譯，以生成非音頻數據，以傳送到群組中其他用戶的計算設備。然后，其他用戶的計算設備使用接收的非音頻數據生成適合其相應用戶的口頭音頻輸出。在其他用戶的計算設備上生成口頭音頻輸出還可以包括執行到相應用戶的期望語言的翻譯，從而使每個用戶都能夠響應于來自另一用戶的語音輸入，以其期望的語言接收口頭音頻輸出，而與語音輸入的原始語言無關。

背景技術

實時翻譯通常用于使說不同語言的人能夠參與對話。就這一點而言，實時翻譯是指與對話基本同時地執行的并且希望在一個人說一種語言的話語的時間與向另一用戶提供另一種語言的該話語的文本或口頭表示的時間之間的延遲最小的翻譯。在許多情況下，通過在線服務執行語言之間的翻譯，該在線服務從聽者的設備接收發言者的語音的音頻流(例如，由聽者的移動設備的麥克風捕獲)、執行到聽者期望的語言的翻譯并且然后返回翻譯的話語的音頻流，或替代地，返回翻譯的話語的文本表示，以在聽者的設備上回放和/或顯示。然而，已經發現，在在線連接性受限或不存在的許多情況下，特別是當在移動設備上捕獲并回放音頻時，可能需要翻譯。

此外，在許多情況下，要求用戶明確指定用于執行翻譯的“從”和“到”語言。但是，存在說兩種以上語言的人的群組試圖彼此交談的許多場合，這可能導致與在其間要執行翻譯的正確的語言之間進行選擇和切換相關聯的附加困難。作為示例，當導游帶領來自許多不同國家的人的群組時，即使特定選擇了導游的母語以其來執行翻譯，但是該群組中的其他人可能會以該人不能理解的各種不同的語言問問題。

發明內容

本公開總體上涉及利用本地無線聯網在說不同語言的三個或更多個用戶之間建立多語言翻譯群組的方法、裝置和計算機可讀介質(暫時性和非暫時性)，使得當一個用戶對其相應的計算設備(例如，移動設備)發言時，該用戶的計算設備可以執行自動語音識別，并且在某些情況下，執行到不同語言的翻譯，以生成隨后可以被傳送給多語言翻譯群組中其他用戶的計算設備的非音頻數據(例如，文本數據)。其他用戶的計算設備繼而可以使用傳送給其他用戶的計算設備的非音頻數據來生成適合其相應用戶的口頭音頻輸出。在其他用戶的計算設備上生成口頭音頻輸出還可以包括執行到相應用戶的期望語言的翻譯，從而使每個用戶都能夠響應于來自另一用戶的語音輸入，以其期望的語言接收口頭音頻輸出，而與語音輸入的原始語言無關。

因此，與一些實施方式一致，群組翻譯方法可以包括：在第一用戶的且被配置為輸出第一語言的口頭音頻的第一計算設備中，通過建立到第二用戶的第二計算設備和第三用戶的第三計算設備中的一個或兩個的本地無線網絡連接而加入附加地包括第二用戶和第三用戶的多語言翻譯群組，其中，第二計算設備和第三計算設備分別被配置為輸出第二語言和第三語言的口頭音頻，并且其中，第一語言、第二語言和第三語言彼此不同；和在第一計算設備中，并響應于在第二計算設備處接收的且針對多語言翻譯群組的第二語言的語音輸入：接收與語音輸入關聯的非音頻數據；和從與語音輸入關聯的非音頻數據生成第一語言的且針對第一用戶的口頭音頻輸出。

一些實施方式可以進一步包括：在第三計算設備中，并響應于在第二計算設備處接收的且針對多語言翻譯群組的第二語言的語音輸入：接收與語音輸入關聯的非音頻數據；和從與語音輸入關聯的非音頻數據生成第三語言的且針對第三用戶的第二口頭音頻輸出。一些實施方式還可以包括：在第二計算設備中：接收語音輸入；對語音輸入執行自動語音識別以生成與語音輸入關聯的非音頻數據；和通過多語言翻譯群組將與語音輸入關聯的非音頻數據發送到第一計算設備和第三計算設備。另外，一些實施方式還可以包括：在第二計算設備中：接收語音輸入；對語音輸入執行自動語音識別，并將自動語音識別的輸出從第二語言本地地翻譯成不同語言，以生成與語音輸入關聯的非音頻數據；和通過多語言翻譯群組將與語音輸入關聯的非音頻數據發送到第一計算設備和第三計算設備。