[發(fā)明專利]場(chǎng)景互動(dòng)方法、裝置及電子設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 202010049112.1
• 申請(qǐng)日: 2020-01-16
• 公開(kāi)（公告）號(hào): CN111274910A
• 公開(kāi)（公告）日: 2020-06-12
• 發(fā)明（設(shè)計(jì)）人: 梁宇軒
• 申請(qǐng)（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/46
• 代理公司: 深圳市隆天聯(lián)鼎知識(shí)產(chǎn)權(quán)代理有限公司 44232
• 代理人: 葉虹

1.一種場(chǎng)景互動(dòng)方法，其特征在于，包括：

確定與虛擬場(chǎng)景進(jìn)行互動(dòng)的至少一個(gè)現(xiàn)實(shí)場(chǎng)景；

實(shí)時(shí)獲取所述現(xiàn)實(shí)場(chǎng)景的現(xiàn)實(shí)場(chǎng)景信息；

對(duì)所述現(xiàn)實(shí)場(chǎng)景信息進(jìn)行特征提取以得到所述現(xiàn)實(shí)場(chǎng)景的場(chǎng)景特征；

根據(jù)所述虛擬場(chǎng)景與所述現(xiàn)實(shí)場(chǎng)景的對(duì)應(yīng)關(guān)系將所述現(xiàn)實(shí)場(chǎng)景的場(chǎng)景特征映射至所述虛擬場(chǎng)景中。

2.根據(jù)權(quán)利要求1所述的場(chǎng)景互動(dòng)方法，其特征在于，所述場(chǎng)景特征包括圖像特征和音頻特征中的至少一種。

3.根據(jù)權(quán)利要求2所述的場(chǎng)景互動(dòng)方法，其特征在于，所述對(duì)所述現(xiàn)實(shí)場(chǎng)景信息進(jìn)行特征提取以得到所述現(xiàn)實(shí)場(chǎng)景的場(chǎng)景特征，包括：

獲取所述現(xiàn)實(shí)場(chǎng)景信息中的圖像信息和音頻信息；

對(duì)所述圖像信息進(jìn)行特征提取以得到所述現(xiàn)實(shí)場(chǎng)景的圖像特征；

對(duì)所述音頻信息進(jìn)行特征提取以得到所述現(xiàn)實(shí)場(chǎng)景的音頻特征。

4.根據(jù)權(quán)利要求3所述的場(chǎng)景互動(dòng)方法，其特征在于，所述對(duì)所述圖像信息進(jìn)行特征提取以得到所述現(xiàn)實(shí)場(chǎng)景的圖像特征，包括：

對(duì)所述圖像信息進(jìn)行場(chǎng)景識(shí)別以得到所述現(xiàn)實(shí)場(chǎng)景的場(chǎng)景圖像特征；

對(duì)所述圖像信息進(jìn)行人臉識(shí)別以得到所述現(xiàn)實(shí)場(chǎng)景的人物圖像特征；

對(duì)所述圖像信息進(jìn)行人物動(dòng)作識(shí)別以得到所述顯示場(chǎng)景的動(dòng)作圖像特征。

5.根據(jù)權(quán)利要求3所述的場(chǎng)景互動(dòng)方法，其特征在于，所述對(duì)所述圖像信息進(jìn)行特征提取以得到所述現(xiàn)實(shí)場(chǎng)景的圖像特征，包括：

從所述圖像信息中獲取對(duì)應(yīng)于不同圖像采集參數(shù)的所述現(xiàn)實(shí)場(chǎng)景的局部圖像；

將同一時(shí)間區(qū)間內(nèi)的所述局部圖像進(jìn)行圖像拼接以得到所述現(xiàn)實(shí)場(chǎng)景的融合圖像；

對(duì)所述融合圖像進(jìn)行特征提取以得到所述現(xiàn)實(shí)場(chǎng)景的圖像特征。

6.根據(jù)權(quán)利要求5所述的場(chǎng)景互動(dòng)方法，其特征在于，所述圖像采集參數(shù)包括圖像采集角度和圖像采集范圍中的至少一種。

7.根據(jù)權(quán)利要求5所述的場(chǎng)景互動(dòng)方法，其特征在于，所述對(duì)所述融合圖像進(jìn)行特征提取以得到所述現(xiàn)實(shí)場(chǎng)景的圖像特征，包括：

對(duì)所述融合圖像進(jìn)行邊緣檢測(cè)以得到所述融合圖像中的特征區(qū)域；

對(duì)所述特征區(qū)域進(jìn)行特征提取以得到所述現(xiàn)實(shí)場(chǎng)景的圖像特征。

8.根據(jù)權(quán)利要求3所述的場(chǎng)景互動(dòng)方法，其特征在于，所述對(duì)所述音頻信息進(jìn)行特征提取以得到所述現(xiàn)實(shí)場(chǎng)景的音頻特征，包括：

對(duì)所述音頻信息進(jìn)行語(yǔ)音識(shí)別以得到所述現(xiàn)實(shí)場(chǎng)景的文本音頻特征；

對(duì)所述音頻信息進(jìn)行波形檢測(cè)以得到所述現(xiàn)實(shí)場(chǎng)景的波形音頻特征。

9.根據(jù)權(quán)利要求1所述的場(chǎng)景互動(dòng)方法，其特征在于，所述根據(jù)所述虛擬場(chǎng)景與所述現(xiàn)實(shí)場(chǎng)景的對(duì)應(yīng)關(guān)系將所述現(xiàn)實(shí)場(chǎng)景的場(chǎng)景特征映射至所述虛擬場(chǎng)景中，包括：

根據(jù)所述虛擬場(chǎng)景與所述現(xiàn)實(shí)場(chǎng)景的對(duì)應(yīng)關(guān)系，在所述虛擬場(chǎng)景中確定與所述現(xiàn)實(shí)場(chǎng)景相對(duì)應(yīng)的特征映射區(qū)域；

在所述特征映射區(qū)域中展示與所述現(xiàn)實(shí)場(chǎng)景的場(chǎng)景特征具有映射關(guān)系的場(chǎng)景內(nèi)容。

10.根據(jù)權(quán)利要求9所述的場(chǎng)景互動(dòng)方法，其特征在于，所述在所述特征映射區(qū)域中展示與所述現(xiàn)實(shí)場(chǎng)景的場(chǎng)景特征具有映射關(guān)系的場(chǎng)景內(nèi)容，包括：

當(dāng)所述場(chǎng)景特征為圖像特征時(shí)，在所述特征映射區(qū)域中展示與所述圖像特征具有映射關(guān)系的圖像響應(yīng)內(nèi)容；

當(dāng)所述場(chǎng)景特征為音頻特征時(shí)，在所述特征映射區(qū)域中展示與所述音頻特征具有映射關(guān)系的音頻響應(yīng)內(nèi)容。