[發明專利]媒體捕獲事件中的實體的自動識別

有效

• 申請號: 202011083777.0
• 申請日: 2016-06-16
• 公開（公告）號: CN112218112B
• 公開（公告）日: 2022-06-17
• 發明（設計）人: A·考爾;S-E·特雷姆布萊
• 申請（專利權）人: 微軟技術許可有限責任公司
• 主分類號: H04N21/2187
• 分類號: H04N21/2187;H04N21/234;H04N21/44;H04N21/4722;H04N21/84;H04N21/8405;G06V40/16;G06V20/40;G06V10/774;G06V10/764;G06K9/62
• 代理公司: 北京市金杜律師事務所 11256
• 代理人: 范懷志

1.一種媒體捕獲事件中的實體的自動識別方法，包括：

訪問與將在視頻中被呈現的事件有關的信息，其中所述信息是在相對于所述事件的預定時間窗口內被獲得的；

標識可能將在所述視頻中被呈現的一個或多個實體，以產生一個或多個經標識的實體；

基于在所述信息中所標識的至少一種趨勢對所述一個或多個經標識的實體進行排序，以產生一個或多個經排序的實體，所述至少一種趨勢指示所述一個或多個經標識的實體中的哪些實體與所述事件相關的趨勢；

在所述視頻的呈現期間執行識別處理，以在所述視頻中標識至少一個經排序的實體；

執行搜索以取回與由所述識別處理標識的所述至少一個經排序的實體相關的內容；以及

在所述視頻的所述呈現期間實時呈現與所述至少一個經排序的實體相關的所述內容。

2.根據權利要求1所述的方法，其中所述事件是經由所述視頻捕獲的實況事件。

3.根據權利要求1所述的方法，其中所述呈現將所述內容呈現在所述視頻正在被呈現的設備上或者呈現在與所述視頻正在被呈現的所述設備不同的設備上。

4.根據權利要求1所述的方法，其中所述一個或多個實體包括至少一個人物，并且其中執行識別處理包括：使用經訓練的識別模型對所述視頻中的一個或多個人物執行面部識別。

5.根據權利要求1所述的方法，其中在所述視頻捕獲事件的實況版本的同時，執行所述信息的所述訪問、所述識別處理的所述執行以及所述內容的所述呈現。

6.根據權利要求1所述的方法，其中所述信息的所述訪問從社交媒體網絡訪問所述信息。

7.根據權利要求1所述的方法，其中所述信息包括趨勢信息。

8.根據權利要求1所述的方法，其中所述一個或多個實體中的每個實體是組織、人物或位置中的至少一個。

9.根據權利要求7所述的方法，其中所述趨勢信息被訪問以推斷所述事件的上下文。

10.根據權利要求1所述的方法，其中所述呈現呈現與經識別的實體相關聯的所述內容。

11.根據權利要求1所述的方法，還包括：

在所述視頻的所述呈現之前并且基于所述信息，收集訓練數據以用于標識可能將在所述視頻中被呈現的所述一個或多個實體中的至少一個實體，所述訓練數據包括所述至少一個實體的圖像數據；以及

使用所述訓練數據訓練模型，以學習所述至少一個實體的特征。

12.一種存儲計算機可執行指令的計算機可讀存儲介質，所述計算機可執行指令在由硬件處理器執行時使所述硬件處理器執行一種方法，所述方法包括：

訪問與將在視頻中被呈現的事件有關的信息，其中所述信息是在相對于所述事件的預定時間窗口內被獲得的，所述預定時間窗口是基于事件的類型或所述事件的持續時間中的至少一個而被確定的；

標識可能將在所述視頻中被呈現的一個或多個實體，以產生一個或多個經標識的實體；

基于在所述信息中所標識的至少一種趨勢對所述一個或多個經標識的實體進行排序，以產生一個或多個經排序的實體，所述至少一種趨勢指示所述一個或多個經標識的實體中的那些實體與所述事件相關的趨勢；

在所述視頻的呈現期間執行識別處理，以在所述視頻中標識所述一個或多個經排序的實體中的至少一個實體；

執行搜索以取回與由所述識別處理標識的所述至少一個經排序的實體相關的內容；以及

在所述視頻的所述呈現期間實時呈現與所述至少一個經排序的實體相關的所述內容。

13.根據權利要求12所述的計算機可讀存儲介質，其中所述呈現將所述內容呈現在所述視頻正在被呈現的設備上或者呈現在與所述視頻正在被呈現的所述設備不同的設備上。