[發(fā)明專利]一種交互式富媒體可視化渲染方法及系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201410830648.1
• 申請(qǐng)日: 2014-12-26
• 公開（公告）號(hào): CN104602116B
• 公開（公告）日: 2019-02-22
• 發(fā)明（設(shè)計(jì)）人: 高榮華;吳華瑞;孫想;李慶學(xué);陳誠;朱華吉;王元?jiǎng)?/a>
• 申請(qǐng)（專利權(quán)）人: 北京農(nóng)業(yè)智能裝備技術(shù)研究中心
• 主分類號(hào): H04N21/44
• 分類號(hào): H04N21/44;H04N21/234;H04N21/433;H04N21/81
• 代理公司: 北京路浩知識(shí)產(chǎn)權(quán)代理有限公司 11002
• 代理人: 李相雨

本發(fā)明提供了一種交互式富媒體可視化渲染方法，包括：S1.將包含圖形、圖像和視頻的異構(gòu)富媒體場景對(duì)象進(jìn)行存儲(chǔ)；S2.讀取所述異構(gòu)富媒體場景對(duì)象，對(duì)所述異構(gòu)富媒體場景對(duì)象進(jìn)行融合，得到多源異構(gòu)富媒體場景；S3.對(duì)所述多源異構(gòu)富媒體場景進(jìn)行可視化渲染。本發(fā)明所述的方法及系統(tǒng)，將圖形、圖像、視頻進(jìn)行融合，通過在富媒體場景中設(shè)定交互觸點(diǎn)，利用人機(jī)交互技術(shù)，實(shí)現(xiàn)場景對(duì)象的交互觸發(fā)，提升富媒體場景可視化描述效率與場景互動(dòng)能力。

技術(shù)領(lǐng)域

本發(fā)明涉及富媒體領(lǐng)域，具體涉及一種交互式富媒體可視化渲染方法及系統(tǒng)。

背景技術(shù)

以文字、圖像、聲音、視頻、動(dòng)畫與交互腳本多種形式組合的富媒體具有豐富的表現(xiàn)力與互動(dòng)性。傳統(tǒng)的富媒體可視化展示方法通過某種播放器對(duì)富媒體文件內(nèi)容逐一播放，缺少對(duì)可視化場景的交互能力。為體現(xiàn)富媒體互動(dòng)性優(yōu)勢(shì)，通過對(duì)富媒體場景對(duì)象交互式操作，收集面向不同用戶操作的有價(jià)值信息，需要研究一種交互式富媒體可視化渲染方法，實(shí)現(xiàn)對(duì)富媒體場景的可視化沉浸展示。

經(jīng)文獻(xiàn)檢索發(fā)現(xiàn)，在現(xiàn)有富媒體可視化展示研究中，Adobe公司的Flash Liteplayer、Ikivo公司的Mobile SVG和Bitflash公司的SVG Player以及符合LASeR或者DIMS標(biāo)準(zhǔn)的富媒體引擎等，采用局部渲染、矢量填充、反走樣等方法，實(shí)現(xiàn)富媒體場景的可視化渲染，未考慮采用圖形、圖像、視頻、音頻、等多元素混合渲染方式提高渲染效率。在人機(jī)交互方面，也只是單一的時(shí)間軸上的交互，未考慮多角度多方位的場景交互方式。發(fā)明專利“一種高效率富媒體展現(xiàn)系統(tǒng)和方法”(申請(qǐng)?zhí)枺?01210593871.X)，通過構(gòu)建數(shù)據(jù)接收模塊、數(shù)據(jù)解碼模塊、富媒體展現(xiàn)模塊、接收數(shù)據(jù)緩存模塊和解碼數(shù)據(jù)緩存模塊，對(duì)該解碼的富媒體數(shù)據(jù)的內(nèi)容進(jìn)行展現(xiàn)，并采用數(shù)據(jù)緩存隊(duì)列機(jī)制和解碼阻塞機(jī)制，提高富媒體展現(xiàn)效率，減少占用系統(tǒng)內(nèi)存，加快系統(tǒng)響應(yīng)速度。發(fā)明專利“交互式富媒體互動(dòng)系統(tǒng)的控制方法”(申請(qǐng)?zhí)枺?01010589605.0)，通過構(gòu)建交互式富媒體互動(dòng)模型，按照應(yīng)用需求選擇觀察者模式、策略模式與組合模式，定義對(duì)象間一對(duì)多依賴關(guān)系，實(shí)現(xiàn)交互式富媒體互動(dòng)，當(dāng)一個(gè)對(duì)象的狀態(tài)發(fā)生改變時(shí)，所有依賴于它的對(duì)象都得到通知并被自動(dòng)更新，簡化應(yīng)用程序的設(shè)計(jì)，降低各部分之間的耦合。

發(fā)明專利“一種高效率富媒體展現(xiàn)系統(tǒng)和方法”(申請(qǐng)?zhí)枺?01210593871.X)，所述的技術(shù)方案，以減少富媒體展現(xiàn)系統(tǒng)的內(nèi)存開銷，加快富媒體展現(xiàn)系統(tǒng)的響應(yīng)速度為目標(biāo)，對(duì)富媒體數(shù)據(jù)進(jìn)行解碼、展現(xiàn)。當(dāng)富媒體內(nèi)容中包含三維圖形元素時(shí)，數(shù)據(jù)解碼緩存將不適用于可視化場景的展示，無法提高富媒體展現(xiàn)效率。

發(fā)明專利“交互式富媒體互動(dòng)系統(tǒng)的控制方法”(申請(qǐng)?zhí)枺?1010589605.0)，所述的技術(shù)方案，以用戶的請(qǐng)求為交互主線，將模型和視圖連接在一起，不作任何數(shù)據(jù)處理，交互方式必須遵循規(guī)定的關(guān)聯(lián)關(guān)系，無法滿足用戶對(duì)富媒體場景對(duì)象的個(gè)性化互動(dòng)操作。

綜上，現(xiàn)有技術(shù)中的富媒體可視化展示方法中，均是對(duì)圖像、音頻與視頻播放技術(shù)的研究，多是通過使用基于XML規(guī)范的輕量級(jí)媒體標(biāo)記語言，配合腳本等多種技術(shù)展現(xiàn)富媒體內(nèi)容，未考慮幾何圖形、圖像、視頻、音頻等多類型元素混合的可視化渲染表達(dá)方式；交互方式主要是通過時(shí)間或事件觸發(fā)場景發(fā)生變化，交互形式單一，未考慮渲染過程中沉浸式人機(jī)交互方式。

發(fā)明內(nèi)容

針對(duì)現(xiàn)有技術(shù)的不足，本發(fā)明提供一種交互式富媒體可視化渲染方法及系統(tǒng)，將圖形、圖像、視頻進(jìn)行融合，通過在富媒體場景中設(shè)定交互觸點(diǎn)，利用人機(jī)交互技術(shù)，實(shí)現(xiàn)場景對(duì)象的交互觸發(fā)，提升富媒體場景可視化描述效率與場景互動(dòng)能力。

第一方面，本發(fā)明提出了一種交互式富媒體可視化渲染方法，包括：

S1.將包含圖形、圖像和視頻的異構(gòu)富媒體場景對(duì)象進(jìn)行存儲(chǔ)；

S2.讀取所述異構(gòu)富媒體場景對(duì)象，對(duì)所述異構(gòu)富媒體場景對(duì)象進(jìn)行對(duì)象融合，得到多源異構(gòu)富媒體場景；

S3.對(duì)所述多源異構(gòu)富媒體場景進(jìn)行可視化渲染。