[發明專利]用于在視頻流中提供可選擇的交互元素的方法和系統

有效

• 申請號: 201780017927.8
• 申請日: 2017-03-08
• 公開（公告）號: CN108886600B
• 公開（公告）日: 2021-05-28
• 發明（設計）人: R·W·賴利;K-L·古爾;B·D·克里斯蒂;J·D·馬魯斯卡;J·諾貝爾
• 申請（專利權）人: 微軟技術許可有限責任公司
• 主分類號: H04N7/14
• 分類號: H04N7/14
• 代理公司: 上海專利商標事務所有限公司 31100
• 代理人: 陳斌;胡利鳴

本文描述了能夠在360度視頻流中提供可選擇的交互元素的技術。可選擇的交互元素是如下元素(例如，用戶界面元素)：對該元素的選擇發起提供與該元素所關聯的對象有關的信息。例如，可選擇的交互元素可被定位在360度視頻流(例如，360度視頻流的一部分或360度視頻流整體)中的對象附近。用戶界面元素的示例包括但不限于文本、圖標和窗口小部件。

技術領域

本發明涉及視頻流，尤其涉及在360度視頻流中提供多個可選擇的交互元素。

背景技術

近年來，360度視頻系統已變得日益流行。360度視頻系統包括捕捉環境的360度圖像的360度視頻相機。例如，360度視頻系統可以通過因特網提供對360度圖像的訪問以供顯示在遠程查看者的個人計算機上。

一種已在其中使用了360度視頻系統的示例類型的環境是視頻會議環境。例如，360度視頻系統可被合并到視頻會議系統，這使得視頻會議的位于不同位置的參與者能夠使用雙向視頻和音頻傳輸來通信。視頻會議可由360度視頻相機所位于的會議室中的參與者(也稱為，房間中參與者)主控，并且視頻會議系統可以使房間中參與者能夠與沒有在會議室中的其他參與者(例如，遠程參與者)實時通信。360度視頻相機捕捉房間中參與者的圖像，這可被示出在其他參與者的計算機的顯示器上以促進房間中參與者與該其他參與者之間的通信。

常規360度視頻系統通常將遠程用戶(例如，視頻會議的上述其他參與者) 的用戶體驗限于僅查看360度圖像或在360度圖像和其他圖像(例如，聚焦在會議室的特定房間中參與者的圖像)之間進行選擇。

發明內容

本文尤其描述了用于在360度視頻流中提供可選擇的交互元素的各種辦法。可選擇的交互元素是如下元素(例如，用戶界面元素)：對該元素的選擇發起提供與該元素所關聯的對象有關的信息。例如，可選擇的交互元素可在360 度視頻流中(例如，360度視頻流的一部分或360度視頻流的整體)被定位在對象附近。用戶界面元素的示例包括但不限于文本、圖標以及窗口小部件。

在一示例辦法中，由360度視頻相機捕捉的360度視圖中的對象被自動標識。可選擇的交互元素(其被配置成合并到從360度視圖中生成的360度視頻流中)與相應對象相關聯。每一可選擇的交互元素可選擇來提供與相應可選擇的交互元素所關聯的對象有關的信息。一個或多個可選擇的交互元素被合并到 360度視頻流的至少一部分中，使得該一個或多個可選擇的交互元素被定位在該一個或多個相應可選擇的交互元素所關聯的一個或多個相應對象附近。

提供本概述以便以簡化的形式介紹以下在詳細描述中進一步描述的一些概念。本概述并不旨在標識所要求保護主題的關鍵特征或必要特征，也不旨在用于限制所要求保護主題的范圍。此外，注意到本發明不限于在詳細描述和/ 或本文的其它章節中所述的特定實施例。本文呈現這些實施例僅用于說明性的用途。基于本文包含的示教，附加的實施例對相關領域的技術人員將是顯而易見的。

附圖說明

本文結合的并且組成本說明書的一部分的附圖示出了本發明的各實施例，并且還與本描述一起用于解釋所涉及的原理以及使相關領域的技術人員能夠實現和使用所公開的技術。

圖1是根據一實施例的示例交互系統的框圖。

圖2-4是根據各實施例的示出360度視頻流中的可選擇的交互元素的示例計算設備的框圖。

圖5是根據一實施例的示出視頻流的示例計算設備的框圖。

圖6是根據一實施例的示出內容的示例計算設備的框圖。

圖7是根據一實施例的示出圖像的示例計算設備的框圖。

圖8-9是根據各實施例的描繪用于在360度視頻流中提供可選擇的交互元素的示例方法的流程圖。

圖10是根據一實施例的示例計算系統的框圖。

圖11描繪可在其中實現各實施例的示例計算機。