[發(fā)明專利]一種基于移動可視設(shè)備的跨媒體信息檢索系統(tǒng)及方法

無效

• 申請?zhí)枺?/td>: 201110215142.6
• 申請日: 2011-07-29
• 公開（公告）號: CN102262670A
• 公開（公告）日: 2011-11-30
• 發(fā)明（設(shè)計(jì)）人: 吳仁濤;王若梅;孟思明
• 申請（專利權(quán)）人: 中山大學(xué)
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于移動可視設(shè)備的跨媒體信息檢索系統(tǒng)，其特征在于，包括：

圖像輸入模塊，用于將圖像輸入到所述移動可視設(shè)備內(nèi)；

文本輸入模塊，用于輸入與圖像相關(guān)的文字信息；

基于文本的互聯(lián)網(wǎng)圖像檢索模塊，用于檢索出與輸入的文字信息關(guān)聯(lián)的圖像集合，并建立生成文本相關(guān)的圖像集；

基于內(nèi)容的圖像檢索模塊，在文本相關(guān)的圖像集中通過檢索與所輸入圖像匹配的圖像，并建立生成視覺相關(guān)的圖像集；

檢索處理模塊，用于從最終找到的視覺相關(guān)的圖像集中的圖像所在的網(wǎng)頁中提取關(guān)鍵詞，進(jìn)而提取相關(guān)在線內(nèi)容，并顯示檢索結(jié)果。

2.如權(quán)利要求1所述的系統(tǒng)，其特征在于，所述移動可視設(shè)備內(nèi)置有攝像頭，所述圖像通過攝像頭采集并傳送到圖像輸入模塊中。

3.如權(quán)利要求1或2所述的系統(tǒng)，其特征在于，所述移動可視設(shè)備為手機(jī)。

4.如權(quán)利要求1所述的系統(tǒng)，其特征在于，還包括查詢擴(kuò)展模塊，所述查詢擴(kuò)展模塊用于對所輸入的文字信息進(jìn)行擴(kuò)展并將與所述文字信息同義的其他文字一起生成文本集，所述基于文本的互聯(lián)網(wǎng)圖像檢索模塊以所述文本集進(jìn)行關(guān)聯(lián)圖像的檢索。

5.一種基于移動可視設(shè)備的跨媒體信息檢索方法，其特征在于，包括以下步驟：

步驟1：獲取圖像；

步驟2：輸入與所述圖像關(guān)聯(lián)的文字信息；

步驟3：基于文本的互聯(lián)網(wǎng)圖像檢索，即以所輸入的文字信息為索引在互聯(lián)網(wǎng)數(shù)據(jù)庫中進(jìn)行檢索；

步驟4：提取并生成文本相關(guān)的圖像集；

步驟5：基于內(nèi)容的圖像檢索，在文本相關(guān)的圖像集中檢索與所述圖像匹配的圖像；

步驟6：提取并生成視覺相關(guān)的圖像集；

步驟7：提取圖像所在網(wǎng)頁中的關(guān)鍵詞；

步驟8：提取在線內(nèi)容；

步驟9：顯示檢索結(jié)果。

6.如權(quán)利要求5所述的方法，其特征在于，所述移動可視設(shè)備內(nèi)置有攝像頭，所述步驟1中的圖像通過所述攝像頭獲取。

7.如權(quán)利要求5或6所述的方法，其特征在于，所述移動可視設(shè)備為手機(jī)。

8.如權(quán)利要求5所述的方法，其特征在于，在基于文本的互聯(lián)網(wǎng)圖像檢索的步驟之前還包括查詢擴(kuò)展步驟，所述查詢擴(kuò)展步驟對所輸入的文字信息進(jìn)行擴(kuò)展并將與所述文字信息同義的其他文字一起生成文本集，所述基于文本的互聯(lián)網(wǎng)圖像檢索步驟以所述文本集進(jìn)行關(guān)聯(lián)圖像的檢索。