[發明專利]用于捕獲的視聽表演的增強現實過濾器

在審

• 申請號: 201980089530.9
• 申請日: 2019-12-03
• 公開（公告）號: CN113302945A
• 公開（公告）日: 2021-08-24
• 發明（設計）人: 大衛·施坦維爾;安東·霍姆伯格;哈維爾·維勒加斯;保羅·T·池;大衛·楊;佩里·R·庫克
• 申請（專利權）人: 思妙公司
• 主分類號: H04N21/43
• 分類號: H04N21/43;H04N21/431;H04N21/434;H04N21/236;H04N21/2368;H04N21/81
• 代理公司: 北京東方億思知識產權代理有限責任公司 11258
• 代理人: 楊佳婧

1.一種方法，包括：

訪問視聽表演的計算機可讀編碼，所述視聽表演是與經時間同步的背景音軌、樂譜和歌詞相關聯地捕獲的；以及

利用一種或多種應用視覺效果來增強所述視聽表演的呈現，其中，所述應用視覺效果中的至少一種應用視覺效果的視覺音階、視野中的運動、時間、顏色或強度基于從所述視聽表演或從所述經時間同步的背景音軌中以計算方式提取的音頻特征。

2.根據權利要求1所述的方法，

其中，所述應用視覺效果中的至少一種應用視覺效果的視覺音階、視野中的運動、時間、顏色或強度基于編碼在所述經時間同步的樂譜或歌詞中的音樂結構元素或從所述經時間同步的樂譜或歌詞中以計算方式確定的音樂結構元素。

3.根據權利要求1所述的方法，

其中，所述應用視覺效果中的至少一種應用視覺效果包括所述歌詞中的文本的表演同步呈現，其中，視覺音階、視野中的運動、時間、所呈現文本的字體顏色或亮度基于從所述視聽表演或所述經時間同步的背景音軌中提取的音頻特征或基于編碼在所述經時間同步的樂譜或歌詞中的音樂結構元素或從所述經時間同步的樂譜或歌詞中以計算方式確定的音樂結構元素。

4.一種方法，包括：

訪問視聽表演的計算機可讀編碼，所述視聽表演是與經時間同步的背景音軌、樂譜和歌詞相關聯地捕獲的；以及

利用一種或多種應用視覺效果來增強所述視聽表演的呈現，其中，所述應用視覺效果中的至少一種應用視覺效果的視覺音階、視野中的運動、時間、顏色或強度基于編碼在所述經時間同步的樂譜或歌詞中的音樂結構元素或從所述經時間同步的樂譜或歌詞中以計算方式確定的音樂結構元素。

5.根據權利要求4所述的方法，

其中，所述應用視覺效果中的至少一種應用視覺效果的視覺音階、視野中的運動、時間、顏色或強度基于從所述視聽表演或所述經時間同步的背景音軌中以計算方式提取的音頻特征。

6.根據權利要求4所述的方法，

其中，所述應用視覺效果中的至少一種應用視覺效果包括所述歌詞中的文本的表演同步呈現，其中，視覺音階、視野中的運動、時間、所呈現文本的字體顏色或亮度基于從所述視聽表演或所述經時間同步的背景音軌中提取的音頻特征或基于編碼在所述經時間同步的樂譜或歌詞中的音樂結構元素或從所述經時間同步的樂譜或歌詞中以計算方式確定的音樂結構元素。

7.一種方法，包括：

訪問視聽表演的計算機可讀編碼，所述視聽表演是與經時間同步的背景音軌、樂譜和歌詞相關聯地捕獲的；以及

利用一種或多種應用視覺效果來增強所述視聽表演的呈現，其中，所述應用視覺效果中的至少一種應用視覺效果包括所述歌詞中的文本的表演同步呈現，其中，視覺音階、視野中的運動、時間、所呈現文本的字體顏色或亮度基于從所述視聽表演或所述經時間同步的背景音軌中提取的音頻特征或基于編碼在所述經時間同步的樂譜或歌詞中的音樂結構元素或從所述經時間同步的樂譜或歌詞中以計算方式確定的音樂結構元素。

8.根據權利要求7所述的方法，

其中，所述應用視覺效果中的至少一種的視覺音階、視野中的運動、時間、顏色或強度基于從所述視聽表演或所述經時間同步的背景音軌中以計算方式提取的音頻特征。

9.根據權利要求7所述的方法，

其中，所述應用視覺效果中的至少一種應用視覺效果的視覺音階、視野中的運動、時間、顏色或強度基于編碼在所述經時間同步的樂譜或歌詞中的音樂結構元素或從所述經時間同步的樂譜或歌詞中以計算方式確定的音樂結構元素。

10.根據權利要求1、4或7所述的方法，

其中，所述應用視覺效果至少部分地基于從觀眾的成員接收到的輸入而被控制，或者所述應用視覺效果包括至少部分地基于所述輸入的內容，其中，所述視聽表演被流式傳輸到所述觀眾。