[發明專利]用于在視頻會議中增強用戶體驗的技術

在審

• 申請號: 201480081489.8
• 申請日: 2014-09-26
• 公開（公告）號: CN106664389A
• 公開（公告）日: 2017-05-10
• 發明（設計）人: R·瑟蘇拉曼;R·比恩;R·巴斯卡;J-P·賈卡龍
• 申請（專利權）人: 英特爾公司
• 主分類號: H04N7/15
• 分類號: H04N7/15
• 代理公司: 上海專利商標事務所有限公司31100
• 代理人: 黃嵩泉

背景技術

在視頻會議中，以協作方式利用音頻和視覺電信技術以在位于不同地點處的用戶之間提供通信。在一些類型的視頻會議中，服務器執行對多方音頻視頻通信事件的合成：從個體參與者處收集音頻和視頻數據，處理此數據，并且將所產生的已處理數據分配至參與者端點設備。在一些其他類型的視頻會議中，每個參與者的端點設備自身執行對多方音頻視頻通信事件的合成：收集并處理參與者數據，并且向給定的參與者渲染所產生的已處理數據。

附圖說明

圖1展示了根據本公開的實施例配置的示例計算設備。

圖2是框圖，根據本公開的實施例展示了視頻會議事件中的計算設備的示例音頻和視頻數據流。

圖3A根據本公開的實施例展示了計算設備的示例截屏，在所述計算設備上以雙用戶動態顯著性模式顯示了圖形用戶界面(GUI)。

圖3B根據本公開的另一個實施例展示了計算設備的示例截屏，在所述計算設備上以三用戶動態顯著性模式顯示了GUI。

圖3C根據本公開的另一個實施例展示了計算設備的示例截屏，在所述計算設備上以對象/場景顯著性模式顯示了GUI。

圖4A是流程圖，根據本公開的實施例展示了動態顯著性交換的基于IR.94的實現方式。

圖4B是流程圖，根據本公開的實施例展示了動態顯著性交換的基于WebRTC的實現方式。

圖5根據本公開的實施例展示了計算設備的示例截屏，在所述計算設備上以具有不同的分辨率和/或幀率的代表性視頻流顯示了GUI。

圖6A至圖6B根據本公開的實施例展示了計算設備的示例截屏，在所述計算設備上顯示了演示用戶可配置顯著性交換的GUI。

圖7A和圖7B根據本公開的實施例展示了計算設備的示例截屏，在所述計算設備上顯示了具有針對視頻會議參與者的個體化音量控制的GUI。

圖8A是流程圖，根據本公開的實施例展示了個體化音量控制的基于IR.94的實現方式。

圖8B是流程圖，根據本公開的實施例展示了個體化音量控制的基于WebRTC的實現方式。

圖9是曲線圖，示出了隨著分辨率和比特率而變的主觀質量(SSIM)。

圖10根據一些實施例展示了可以執行如本文所描述的用于在視頻會議中增強用戶體驗的技術的示例系統。

圖11展示了可以在其中具體化圖10的系統的小形狀因數設備的實施例。

具體實施方式

公開了用于在視頻會議中增強用戶體驗的技術。根據一些實施例，在參與視頻會議會話的設備上所顯示的圖形用戶界面(GUI)可以經歷對其視頻組成的動態調整，例如，以便渲染在所述GUI的顯著區域或縮略圖區域中的視頻內容。根據一些實施例，可以(1)自動地基于所述視頻會議參與者的檢測到的音頻活動水平的；和/或(2)基于用戶指令來執行對所述GUI的視頻組成的重組。根據一些實施例，可以提供對個體視頻會議參與者的個體音頻流的音量控制。根據一些實施例，在參與視頻會議會話的源設備處采集的視頻數據的分辨率和/或幀率可以例如在編碼之前在采集和/或處理過程中基于此源設備的用戶的所檢測到的音頻活動水平自適應地變化。例如，可以實時地或以其他方式如期望的執行這種自適應調整。鑒于本公開，各種變化和排列將變得明顯。

總體概述