[發明專利]從視頻游戲片段生成視聽內容的方法和系統

在審

• 申請號: 202010076180.7
• 申請日: 2020-01-23
• 公開（公告）號: CN111494941A
• 公開（公告）日: 2020-08-07
• 發明（設計）人: S.A.S.J.布里斯林
• 申請（專利權）人: 索尼互動娛樂歐洲有限公司
• 主分類號: A63F13/497
• 分類號: A63F13/497;G06K9/00;G06K9/46;H04N21/233;H04N21/2343;H04N21/242;H04N21/43;H04N21/439;H04N21/4402;H04N21/472
• 代理公司: 北京市柳沈律師事務所 11105
• 代理人: 張曉明

提供了一種從視頻游戲片段生成視聽內容的方法。該方法包括獲得用戶選擇的音軌和獲得視頻游戲片段。對音軌執行統計分析，以確定與音軌的相應部分相關聯的興奮度。對視頻游戲片段執行統計分析，以確定與視頻游戲片段的相應部分相關聯的興奮度。基于確定的興奮度中的對應關系，將視頻游戲片段的部分與音軌的部分進行匹配。基于所述匹配，生成包括視頻游戲片段的部分的合成視聽內容，該視頻游戲片段與音軌的相應部分匹配。這樣，視頻片段中的平穩和令人興奮的時刻會與音軌中的相應時刻匹配。還提供了相應的系統。

技術領域

本公開涉及一種從視頻游戲片段(footage)生成視聽內容的方法和一種用于從視頻游戲片段生成視聽內容的系統。

背景技術

通常期望從視頻游戲片段生成視頻內容。例如，在視頻游戲錦標賽結束時，可能希望生成與視頻游戲錦標賽中發生的任何高光(highlight)和/烏龍(blooper)相對應的編譯視頻。在某些情況下，玩家可能只是希望回看一些他們的游戲玩法，無論是單個視頻游戲會話還是相同或不同視頻游戲的多個會話。當前，有許多在線視頻頻道利用視頻游戲片段，其中一些吸引了超過一千萬的關注者。

通過添加背景音樂可以增強從視頻游戲片段生成的視頻內容。例如，可能期望在視頻游戲片段中具有特別戲劇性的時刻與音樂曲目中的相應戲劇性時刻匹配。類似地，可能期望在視頻游戲片段中具有與相同音軌的較平穩部分匹配的較平穩的時刻。音樂的引入通常會為觀眾帶來更具吸引力的視頻。更一般而言，玩家可能希望使用自己或他人的視頻游戲片段來生成音樂視頻。

通常，通過后處理軟件可以從視頻游戲片段創建視頻內容。例如，PS4提供了‘SHAREfactory’^TM，玩家可以在其中編輯其PS4捕獲的游戲玩法視頻。通常，諸如此類的軟件允許用戶導入和編輯視頻片段，以及導入音頻以伴隨導入的視頻片段，以創建最終視頻。通常，用戶將必須在時間軸內移動和修剪不同的視頻片段，以便將任何高光瞬間與導入的音頻的相應令人興奮的部分同步(同樣，將低光時刻與音頻的較平穩部分同步)。用戶通常會判斷視頻游戲片段是否以適當的方式伴有音頻。這可能會導致視頻游戲片段中發生的高光時刻與用戶原本打算伴隨這些時刻的音頻部分之間出現輕微的不匹配。

某些視頻編輯軟件可能會提供有關用戶已導入歌曲的信息，諸如節拍的定時。然后，用戶可以使用此信息在時間軸上修剪或定位視頻片段，以便可以將視頻中的剪輯和過渡定為歌曲中的節拍。但是，以這種方式創建視頻內容對于用戶來說仍然是一個費力的過程，在某些情況下，節拍可能不一定表示歌曲的片段是否實際上對應于歌曲的“令人興奮”的部分。

本發明試圖減輕這些問題。

發明內容

根據本文公開的第一方面，提供了根據權利要求1至11中的任一項所述的用于從視頻游戲片段生成視聽內容的方法。

根據本文公開的第二方面，提供了根據權利要求13至25中的任一項所述的用于從視頻游戲片段生成視聽內容的系統。

附圖說明

為了幫助理解本公開并示出實施例如何生效，通過示例的方式參考附圖，其中：

圖1示意性地示出了視頻游戲播放設備的示例；

圖2示意性地示出了根據本公開的用于生成視聽內容的方法的示例；

圖3A示出了音軌的頻譜圖的示例；

圖3B示出了音軌的兩個部分的示例，每個部分具有不同的飽滿度；

圖4示出了正態分布和相應的z得分(z-scores)的示例；

圖5示出了視頻游戲的連續視頻幀的示例，以及表示這些幀之間的像素強度差異的幀；

圖6示意性地示出了LAB顏色空間的示例；