[發明專利]一種交互式富媒體可視化渲染方法及系統

有效

• 申請號: 201410830648.1
• 申請日: 2014-12-26
• 公開（公告）號: CN104602116B
• 公開（公告）日: 2019-02-22
• 發明（設計）人: 高榮華;吳華瑞;孫想;李慶學;陳誠;朱華吉;王元勝
• 申請（專利權）人: 北京農業智能裝備技術研究中心
• 主分類號: H04N21/44
• 分類號: H04N21/44;H04N21/234;H04N21/433;H04N21/81
• 代理公司: 北京路浩知識產權代理有限公司 11002
• 代理人: 李相雨

1.一種交互式富媒體可視化渲染方法，其特征在于，包括：

S1.將包含圖形、圖像和視頻的異構富媒體場景對象進行存儲；

S2.讀取所述異構富媒體場景對象，對所述異構富媒體場景對象進行融合，得到多源異構富媒體場景；

S3.對所述多源異構富媒體場景進行可視化渲染；

其中，對所述異構富媒體場景對象進行融合，得到多源異構富媒體場景包括：

(1)輸入富媒體場景對象U₁[i],U₂[j],U₃[l]與富媒體場景Scene，i＝0,1,2,…,n-1；j＝0,1,2,…,m-1；l＝0,1,2,…,p-1，其中，U₁[i]為圖形對象、U₂[j]為圖像對象、U₃[l]為視頻對象，i,j,l分別為富媒體場景中圖形、圖像、視頻的個數；

(2)分別抽取圖形對象、圖像對象和視頻對象中的幾何形狀、離散像素、視頻編碼的特征參數

(3)計算特征參數在富媒體場景所占的權值，以當前視點到富媒體場景對象的歐氏距離為衡量標準，λ_i＝dist|E_i(x,y,z)-U_j[x,y,z]|，E_i(x,y,z)為視點在富媒體場景中世界坐標值，U_j[x,y,z]為不同元素對象在富媒體場景中的世界坐標值，則U₁[i],U₂[j],U₃[l]的權值分別為：

(4)當U₁[i],U₂[j],U₃[l]共同描述同一富媒體場景Scene時，共享子空間Sub_S為Sub_S＝f(U₁[i],U₂[j],U₃[l])；

(5)在共享子空間內，通過構建學習模型庫，計算異構模態信息自適應模型與優化模型參數，動態調整優化場景對象權值，得到最優融合策略：Scene＝α₁U₁[i]+α₂U₂[j]+α₃U₃[l]；

(6)將融合后的特征向量進行特征重構；

(7)輸出融合后的多源異構的富媒體場景。

2.根據權利要求1所述的方法，其特征在于，所述步驟S1包括：

構建多層存儲架構，將圖形、圖像、視頻異構富媒體場景對象及其屬性在存儲前進行編碼壓縮，動態分配獨立存儲空間，以并發方式分別進行讀取，其中，存儲內部讀寫操作采用互斥方式，為每個存儲訪問對象設定獨立控制單元，當富媒體場景對象遇到交互觸發條件時，將存儲訪問權授予存儲訪問優先級最高的富媒體場景對象。

3.根據權利要求2所述的方法，其特征在于，所述步驟S1還包括：

采用漸進式流傳輸方式，將不同類別富媒體場景對象封裝在含有時間戳場景信息的傳輸層單元里面，所述傳輸層單元包含一個或多個場景交互命令；當富媒體場景更新時，首先根據傳輸層單元上的時間戳判斷此傳輸層單元是否需要切換，若需要，立即解析切換，若不需要，保存傳輸層單元待合適交互觸點再處理，為所述傳輸層單元維護一個緩沖區，各個傳輸層單元按照時間戳順序排列，新加入的傳輸層單元插入合適的位置，每次取緩沖區中第一個傳輸層單元進行處理，以減少對單個對象的遍歷次數。

4.根據權利要求1所述的方法，其特征在于，對所述多源異構富媒體場景進行可視化渲染包括：基于視點的幾何分塊分布式進行渲染，將富媒體場景按元素分為圖形場景單元、圖像場景單元、視頻場景單元，每個場景單元按照位置相關進行編號存儲，每種類型場景單元按照對象類別再次分割成若干子單元，子單元按照位置相關進行編號存儲，存儲內容包含場景單元類型、場景單元位置信息、場景單元所包含的子單元對象、子單元對象的位置信息，在幀渲染的響應邏輯中，根據場景的位置信息確定當前視點所在場景單元與子單元的編號，以及與其相鄰的場景單元與子單元的編號。