[發明專利]一種基于XML的交互應用多媒體信息檢索方法

無效

• 申請號: 201110186859.2
• 申請日: 2011-07-05
• 公開（公告）號: CN102236714A
• 公開（公告）日: 2011-11-09
• 發明（設計）人: 孟思明;張潔;林格;羅育澤
• 申請（專利權）人: 廣東星海數字家庭產業技術研究院有限公司;中山大學
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于XML的交互應用多媒體信息檢索方法，其特征在于，該方法將XML文檔檢索技術與基于內容的多媒體檢索相結合起來，將多媒體信息的外部特征及其高級語義信息以XML文檔形式的描述，形成XML文檔系統，并對這些描述性的XML文檔進行科學有序地存儲，檢索時與基于內容的多媒體檢索系統相結合，檢索結果按一定的權重結合，形成的最終結果按相關度遞減的順序提供給用戶。

2.根據權利要求1所述的方法，其特征在于，該發明包括多媒體信息處理子系統單元和多媒體信息檢索子系統單元；所述多媒體信息處理子系統單元一方面負責獲取各類多媒體資源的元信息并用XML文檔加以描述，建立XML文檔系統；另一方面對多媒體數據進行基于內容特征的提取，為基于內容的多媒體信息檢索提供多層次數據源；所述多媒體信息檢索子系統單元負責分析用戶提交的請求，分別在XML文檔系統和多媒體的媒體庫、特征庫、知識庫中進行檢索，將兩個系統中檢索出來的結果按照某一權值進行合并，然后將最終結果反饋給用戶。

3.根據權利要求1或2所述的方法，其特征在于，XML文檔對多媒體信息進行描述的流程如下：

步驟31：多媒體信息標識和特征提取；

步驟32：對用于描述多媒體信息的XML文檔的結構進行定義；

步驟33：XML文檔系統建立；

其中，步驟31中多媒體信息的對象標識主要是通過相關工具箱的輔助，以全自動或半自動需要用戶部分干預的方式對音頻、靜態圖像、視頻鏡頭等數據中包含的對象進行標識，以便針對對象進行特征提取、描述和查詢；多媒體的對象標識屬于局部特征處理，如果是針對多媒體數據進行整體內容檢索，通常只需要提取全局特征，而不需要對象標識功能；特征提取是指對音頻、視頻、圖像等多媒體數據自動或半自動提取用戶感興趣的，適合檢索要求的特征；特征提取有全局性的，也有局部性的，對于圖像信息的特征提取主要是提取圖像的顏色、紋理、輪廓、形狀、位置、空間特征；對于視頻信息，是提取關鍵幀、運動目標特征和運動攝像視頻特征；對于音頻信息，是提取音頻媒體特征；

步驟33中每個多媒體信息對應于XML文檔一個resource節點，而多媒體的各種元信息通過resource節點包含的多個子節點，包括Title、size、Format、nescription描述出來，從而多媒體系統轉換成XML文檔系統，并將多媒體與相應的XML映射提供查詢。

4.根據權利要求1或2所述的方法，其特征在于，多媒體信息檢索子系統檢索方法流程如下：

步驟41：XML文檔的檢索；

步驟42：多媒體的多特征融合檢索；

步驟43：XML文檔檢索與基于內容的多媒體檢索的結合；

其中，步驟41中，在XML文檔系統中，用戶對多媒體信息的檢索轉換成對XML文檔進行檢索；具體的檢索方式有以下三種：a.基于導航瀏覽式的檢索；b.關鍵詞檢索；c.全文檢索；

步驟42中，多特征融合檢索是先進行基于單個特征的多媒體檢索，對多個單特征檢索返回的結果依照一定的算法，將它們在各個特征上的相似性測度進行合并，然后按合并后的綜合相似性度量對這些結果進行排序反饋給用戶；

步驟43中，對于兩個系統檢索出來的結果，分別賦予一定的權重相結合，形成最終結果反饋給用戶；用戶對該檢索結果給出滿意或不滿意評價，并把此評價反饋給系統，系統從用戶反饋中分析出用戶的查詢需要，并自動調整權重參數和特征查詢參數，形成新一輪查詢；如此循環，直到用戶滿意為止。