[發(fā)明專(zhuān)利]上下文數(shù)字媒體處理系統(tǒng)和方法

在審

• 申請(qǐng)?zhí)枺?/td>: 201980032693.3
• 申請(qǐng)日: 2019-04-03
• 公開(kāi)（公告）號(hào): CN112639759A
• 公開(kāi)（公告）日: 2021-04-09
• 發(fā)明（設(shè)計(jì)）人: M.W.貝策爾;Z.T.沃恩伯格;S.M.麥克雷;A.J.施沃茨
• 申請(qǐng)（專(zhuān)利權(quán)）人: 索尼互動(dòng)娛樂(lè)有限責(zé)任公司
• 主分類(lèi)號(hào): G06F15/16
• 分類(lèi)號(hào): G06F15/16;G06F15/173;G06F16/783;G06F16/71;G06F16/953;G06F16/955;G06N20/00;A63F13/53;H04N7/173
• 代理公司: 北京市柳沈律師事務(wù)所 11105
• 代理人: 張曉明

公開(kāi)了一種用于上下文數(shù)字媒體處理的系統(tǒng)和方法。示例性方法包括：從源接收內(nèi)容作為正在向用戶(hù)顯示的數(shù)字媒體；處理所述數(shù)字媒體以確定所述內(nèi)容內(nèi)的上下文信息；基于所確定的上下文信息在至少一個(gè)網(wǎng)絡(luò)中搜索補(bǔ)充內(nèi)容；以及發(fā)送所述補(bǔ)充內(nèi)容用于所述源或接收設(shè)備中的至少一個(gè)使用。

技術(shù)領(lǐng)域

本技術(shù)涉及根據(jù)上下文處理數(shù)字媒體的系統(tǒng)和方法，以通過(guò)疊加補(bǔ)充內(nèi)容或通過(guò)增強(qiáng)現(xiàn)實(shí)提供數(shù)字媒體的增強(qiáng)顯示。

發(fā)明內(nèi)容

根據(jù)各種實(shí)施例，本技術(shù)涉及一種方法，包括：(a)從源接收正在向用戶(hù)顯示的數(shù)字媒體形式的內(nèi)容；(b)處理所述數(shù)字媒體以確定所述內(nèi)容內(nèi)的上下文信息；(c)基于所確定的上下文信息在至少一個(gè)網(wǎng)絡(luò)中搜索補(bǔ)充內(nèi)容；以及(d)發(fā)送所述補(bǔ)充內(nèi)容以供所述源或接收設(shè)備中的至少一個(gè)使用。

根據(jù)各種實(shí)施例，本技術(shù)涉及一種方法，包括：(a)從游戲機(jī)接收正在向用戶(hù)顯示的圖像或視頻形式的實(shí)時(shí)內(nèi)容；(b)使用多個(gè)上下文信息源實(shí)時(shí)處理所述圖像或視頻，以確定所述內(nèi)容內(nèi)的上下文信息，所述多個(gè)上下文信息源包括：檢測(cè)關(guān)鍵字或短語(yǔ)的光學(xué)字符識(shí)別、使用搜索引擎對(duì)相關(guān)圖像進(jìn)行反向圖像搜索，以及利用機(jī)器學(xué)習(xí)來(lái)識(shí)別所述圖像中的特征的場(chǎng)景和地標(biāo)檢測(cè)中的任何一種；(c)實(shí)時(shí)存儲(chǔ)為所述實(shí)時(shí)內(nèi)容處理的最新上下文信息，將所述最新上下文信息存儲(chǔ)在上下文存儲(chǔ)庫(kù)的存儲(chǔ)器中，其中，所述最新上下文信息隨著所述圖像或視頻的變化而變化；(d)基于所述上下文信息在互聯(lián)網(wǎng)上搜索第三方補(bǔ)充內(nèi)容；以及(e)實(shí)時(shí)發(fā)送所述第三方補(bǔ)充內(nèi)容，以供所述源或接收設(shè)備中的至少一個(gè)使用。

根據(jù)各種實(shí)施例，本技術(shù)涉及一種系統(tǒng)，包括：(a)數(shù)據(jù)收集和分析系統(tǒng)，其被配置為：(i)從源接收?qǐng)D像或視頻形式的內(nèi)容；(ii)通過(guò)使用多個(gè)上下文信息源處理所述圖像或視頻獲得上下文信息，所述多個(gè)上下文信息源包括：檢測(cè)關(guān)鍵字或短語(yǔ)的光學(xué)字符識(shí)別、使用搜索引擎對(duì)相關(guān)圖像進(jìn)行反向圖像搜索，以及利用機(jī)器學(xué)習(xí)來(lái)識(shí)別所述圖像中的特征的場(chǎng)景和地標(biāo)檢測(cè)中的任何一種；(iii)基于所述上下文信息在至少一個(gè)網(wǎng)絡(luò)中搜索補(bǔ)充內(nèi)容；以及(iv)發(fā)送所述補(bǔ)充內(nèi)容以供所述源或接收設(shè)備中的至少一個(gè)使用；以及(b)上下文存儲(chǔ)庫(kù)，其被配置為：存儲(chǔ)所述內(nèi)容、所述上下文信息和所述補(bǔ)充內(nèi)容。

附圖說(shuō)明

附圖與下面的具體實(shí)施方式被并入說(shuō)明書(shū)中并構(gòu)成說(shuō)明書(shū)的一部分，并且用于進(jìn)一步說(shuō)明包括所要求公開(kāi)的概念的實(shí)施例，并解釋這些實(shí)施例的各種原理和優(yōu)點(diǎn)，其中相同的附圖標(biāo)記在各個(gè)視圖中表示相同或功能相似的元件。

本文所公開(kāi)的方法和系統(tǒng)已在適當(dāng)?shù)那闆r下通過(guò)附圖中的常規(guī)符號(hào)來(lái)表示，僅顯示與理解本發(fā)明的實(shí)施例相關(guān)的那些特定細(xì)節(jié)，以便不使用對(duì)于掌握了文本所述的優(yōu)點(diǎn)的本領(lǐng)域普通技術(shù)人員來(lái)說(shuō)容易顯而易見(jiàn)的細(xì)節(jié)來(lái)模糊本公開(kāi)。

圖1是用于實(shí)踐本技術(shù)的方面的示例系統(tǒng)的示意圖。

圖2是本公開(kāi)的示例方法的流程圖。

圖3是本公開(kāi)的示例方法的流程圖。

圖4示出了根據(jù)本公開(kāi)的實(shí)施例顯示圖形用戶(hù)界面(以下簡(jiǎn)稱(chēng)“GUI”)的示例用戶(hù)設(shè)備(以下簡(jiǎn)稱(chēng)“UE”)。

圖5A示出了具有GUI疊加和在UE中顯示的相應(yīng)GUI的視頻游戲的屏幕截圖。

圖5B示出了視頻游戲和GUI疊加的更新的屏幕截圖。

圖5C和5D共同示出了游戲重現(xiàn)時(shí)視頻游戲和GUI疊加的屏幕截圖。

圖6A和6B共同示出了用于通過(guò)應(yīng)用程序在疊加在視頻游戲顯示器上的GUI或UE中生成補(bǔ)充內(nèi)容的特征檢測(cè)。

圖7是可用于實(shí)現(xiàn)本技術(shù)的方面的示例性計(jì)算機(jī)設(shè)備的示意圖。

具體實(shí)施方式

本公開(kāi)一般涉及允許對(duì)媒體(例如圖像或視頻)進(jìn)行自動(dòng)上下文分析以揭示其中的上下文信息、以及使用上下文信息作為搜索(例如互聯(lián)網(wǎng)搜索)與媒體相關(guān)的補(bǔ)充內(nèi)容的輸入的系統(tǒng)和方法。