[發(fā)明專利]一種基于XML的交互應(yīng)用多媒體信息檢索方法

無(wú)效

• 申請(qǐng)?zhí)枺?/td>: 201110186859.2
• 申請(qǐng)日: 2011-07-05
• 公開(kāi)（公告）號(hào): CN102236714A
• 公開(kāi)（公告）日: 2011-11-09
• 發(fā)明（設(shè)計(jì)）人: 孟思明;張潔;林格;羅育澤
• 申請(qǐng)（專利權(quán)）人: 廣東星海數(shù)字家庭產(chǎn)業(yè)技術(shù)研究院有限公司;中山大學(xué)
• 主分類(lèi)號(hào): G06F17/30
• 分類(lèi)號(hào): G06F17/30
• 代理公司: 暫無(wú)信息
• 代理人: 暫無(wú)信息

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)字電視交互應(yīng)用領(lǐng)域，具體涉及一種基于XML的交互應(yīng)用多媒體信息檢索方法。

背景技術(shù)

多媒體技術(shù)、Intemet和數(shù)字電視交互應(yīng)用技術(shù)的發(fā)展給人們帶來(lái)巨大的多媒體信息海洋，并進(jìn)一步導(dǎo)致了多媒體信息庫(kù)的產(chǎn)生。在數(shù)字電視交互應(yīng)用服務(wù)中，圖像、音頻、視頻等多媒體數(shù)據(jù)信息量巨大。但是目前的多媒體檢索系統(tǒng)大多都能實(shí)現(xiàn)對(duì)多媒體進(jìn)行基于文本的檢索和基于內(nèi)容的檢索。這兩種檢索方式的應(yīng)用有其局限性。首先，采用文本來(lái)表達(dá)多媒體信息的內(nèi)容，檢索對(duì)象的不一致決定在這種信息的傳遞過(guò)程中必定會(huì)有大量信息的丟失，不能真正反映信息的內(nèi)容；其次，多媒體信息是一種隨意性強(qiáng)的信息，缺乏一般意義上的規(guī)范性，所以在使用文字描述多媒體信息時(shí)，難以做到準(zhǔn)確而完整的描述。作為檢索領(lǐng)域比較熱門(mén)的話題，基于內(nèi)容的多媒體信息檢索仍然存在一些問(wèn)題，主要包括：多媒體信息內(nèi)容的描述、特征的自動(dòng)提取、多媒體的同步技術(shù)、匹配和結(jié)構(gòu)化的選擇問(wèn)題。因此，有必要提出一種新的多媒體信息檢索方式，解決用戶在進(jìn)行多媒體信息檢索時(shí)出現(xiàn)的問(wèn)題。

XML作為標(biāo)識(shí)語(yǔ)言，是結(jié)構(gòu)化的數(shù)據(jù)，可以使用自定義標(biāo)簽，具有強(qiáng)大的鏈接功能。因此，可以使用XML文檔處理多媒體的基本語(yǔ)義信息，將多媒體檢索技術(shù)與基于XML的文本檢索相結(jié)合，建立基于XML的多媒體檢索系統(tǒng)。綜合兩種檢索技術(shù)的優(yōu)勢(shì)，達(dá)到更深的檢索層次，提高檢索效率。

目前來(lái)看，基于XML的多媒體信息檢索技術(shù)是一種新型的檢索技術(shù)，具有一定的現(xiàn)實(shí)意義。首先，XML將多媒體的基本語(yǔ)義信息集成并使用標(biāo)簽封裝在一個(gè)文檔中顯示，避免了信息在傳遞過(guò)程中的丟失，能真正反映信息的內(nèi)容。其次，XML可以結(jié)構(gòu)化地描述多媒體信息，結(jié)構(gòu)化的XML文檔，可以為用戶指定定義了的文檔元素詞匯表，以提高檢索效率.最后，XML文檔的樣式與內(nèi)容是分離的，可以使應(yīng)用程序輕松地尋找并提取有用的特征數(shù)據(jù)信息.綜上所述，基于XML的多媒體信息檢索技術(shù)能夠解決傳統(tǒng)的多媒體信息檢索帶來(lái)的問(wèn)題，滿足不同層次用戶的檢索要求，使用戶更為方便、高效地獲取信息。本發(fā)明將提出一種基于XML的交互應(yīng)用多媒體信息檢索方法。

發(fā)明內(nèi)容

本發(fā)明提供一種基于XML的交互應(yīng)用多媒體信息檢索方法，能提高交互應(yīng)用服務(wù)多媒體數(shù)據(jù)庫(kù)檢索的效率。

一種基于XML的交互應(yīng)用多媒體信息檢索方法，是將XML文檔檢索技術(shù)與基于內(nèi)容的多媒體檢索相結(jié)合起來(lái)，將多媒體信息的外部特征及其高級(jí)語(yǔ)義信息以XML文檔形式的描述，形成XML文檔系統(tǒng)，并對(duì)這些描述性的XML文檔進(jìn)行科學(xué)有序地存儲(chǔ)，檢索時(shí)與基于內(nèi)容的多媒體檢索系統(tǒng)相結(jié)合，檢索結(jié)果按一定的權(quán)重結(jié)合，形成的最終結(jié)果按相關(guān)度遞減的順序提供給用戶。

該發(fā)明包括多媒體信息處理子系統(tǒng)單元和多媒體信息檢索子系統(tǒng)單元；所述多媒體信息處理子系統(tǒng)單元一方面負(fù)責(zé)獲取各類(lèi)多媒體資源的元信息并用XML文檔加以描述，建立XML文檔系統(tǒng)；另一方面對(duì)多媒體數(shù)據(jù)進(jìn)行基于內(nèi)容特征的提取，為基于內(nèi)容的多媒體信息檢索提供多層次數(shù)據(jù)源；所述多媒體信息檢索子系統(tǒng)單元負(fù)責(zé)分析用戶提交的請(qǐng)求，分別在XML文檔系統(tǒng)和多媒體的媒體庫(kù)、特征庫(kù)、知識(shí)庫(kù)中進(jìn)行檢索，將兩個(gè)系統(tǒng)中檢索出來(lái)的結(jié)果按照某一權(quán)值進(jìn)行合并，然后將最終結(jié)果反饋給用戶。

XML文檔對(duì)多媒體信息進(jìn)行描述的流程如下：

步驟31：多媒體信息標(biāo)識(shí)和特征提取；

步驟32：對(duì)用于描述多媒體信息的XML文檔的結(jié)構(gòu)進(jìn)行定義；

步驟33：XML文檔系統(tǒng)建立；

其中，步驟31中多媒體信息的對(duì)象標(biāo)識(shí)主要是通過(guò)相關(guān)工具箱的輔助，以全自動(dòng)或半自動(dòng)需要用戶部分干預(yù)的方式對(duì)音頻、靜態(tài)圖像、視頻鏡頭等數(shù)據(jù)中包含的對(duì)象進(jìn)行標(biāo)識(shí)，以便針對(duì)對(duì)象進(jìn)行特征提取、描述和查詢；多媒體的對(duì)象標(biāo)識(shí)屬于局部特征處理，如果是針對(duì)多媒體數(shù)據(jù)進(jìn)行整體內(nèi)容檢索，通常只需要提取全局特征，而不需要對(duì)象標(biāo)識(shí)功能；特征提取是指對(duì)音頻、視頻、圖像等多媒體數(shù)據(jù)自動(dòng)或半自動(dòng)提取用戶感興趣的，適合檢索要求的特征；特征提取有全局性的，也有局部性的，對(duì)于圖像信息的特征提取主要是提取圖像的顏色、紋理、輪廓、形狀、位置、空間特征；對(duì)于視頻信息，是提取關(guān)鍵幀、運(yùn)動(dòng)目標(biāo)特征和運(yùn)動(dòng)攝像視頻特征；對(duì)于音頻信息，是提取音頻媒體特征；

步驟33中每個(gè)多媒體信息對(duì)應(yīng)于XML文檔一個(gè)resource節(jié)點(diǎn)，而多媒體的各種元信息通過(guò)resource節(jié)點(diǎn)包含的多個(gè)子節(jié)點(diǎn)，包括Title、size、Format、nescription描述出來(lái)，從而多媒體系統(tǒng)轉(zhuǎn)換成XML文檔系統(tǒng)，并將多媒體與相應(yīng)的XML映射提供查詢。