[發(fā)明專利]一種建立微博索引的方法及裝置有效
| 申請?zhí)枺?/td> | 201410272487.9 | 申請日: | 2014-06-18 |
| 公開(公告)號: | CN104021205B | 公開(公告)日: | 2017-04-19 |
| 發(fā)明(設(shè)計)人: | 楊樹強;陳志坤;金松昌;尹洪;賈焰;韓偉紅;周斌;李愛平 | 申請(專利權(quán))人: | 中國人民解放軍國防科學(xué)技術(shù)大學(xué) |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30 |
| 代理公司: | 北京集佳知識產(chǎn)權(quán)代理有限公司11227 | 代理人: | 王寶筠 |
| 地址: | 410073 湖南*** | 國省代碼: | 湖南;43 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 一種 建立 索引 方法 裝置 | ||
1.一種建立微博索引的方法,其特征在于,所述方法應(yīng)用于分布式存儲網(wǎng)絡(luò)中的第一節(jié)點,包括:
從微博系統(tǒng)中實時獲取用戶發(fā)布的博文;
當(dāng)所述博文是對其他博文的轉(zhuǎn)發(fā)和/或回復(fù)時,將所述博文的主題確定為所述博文所回復(fù)和/或所轉(zhuǎn)發(fā)的原始博文的主題;
當(dāng)所述博文與其他博文無轉(zhuǎn)發(fā)和/或回復(fù)關(guān)系時,使用Twitter-LDA模型確定所述博文的主題;
在與所述主題相對應(yīng)的索引結(jié)構(gòu)的底層建立所述博文的索引;
判斷所述索引結(jié)構(gòu)的底層的索引數(shù)是否大于或等于預(yù)設(shè)閾值;
如果是,則將已存儲在所述索引結(jié)構(gòu)的底層的索引數(shù)據(jù)遷移至分布式存儲網(wǎng)絡(luò)中的第二節(jié)點。
2.如權(quán)利要求1所述的方法,其特征在于,所述從微博系統(tǒng)中實時獲取用戶發(fā)布的博文之后,還包括:
確定發(fā)布所述博文的用戶;
判斷所述用戶是否為惡意用戶,如果否,才執(zhí)行確定所述博文的主題的步驟。
3.如權(quán)利要求1所述的方法,其特征在于,建立所述索引之后,還包括:
獲取所述微博系統(tǒng)中的主節(jié)點下發(fā)的搜索任務(wù);所述搜索任務(wù)是由所述主節(jié)點根據(jù)用戶在搜索操作中給定的搜索關(guān)鍵字對應(yīng)的主題所分配的;
在所述索引結(jié)構(gòu)的底層搜索與所述關(guān)鍵字相匹配的索引,得到搜索結(jié)果;
將所述搜索結(jié)果發(fā)送至所述主節(jié)點,以便所述主節(jié)點綜合所述第一節(jié)點的搜索結(jié)果和所述第二節(jié)點的搜索結(jié)果得到所述主題的搜索結(jié)果,綜合所有主題的搜索結(jié)果,得到最終搜索結(jié)果。
4.如權(quán)利要求3所述的方法,其特征在于,所述綜合所有主題的搜索結(jié)果之前還包括:對所述所有主題的搜索結(jié)果進行排序。
5.一種建立微博索引的裝置,其特征在于,所述裝置應(yīng)用于分布式存儲網(wǎng)絡(luò)中的第一節(jié)點,包括:
博文獲取模塊:用于從微博系統(tǒng)中實時獲取用戶發(fā)布的博文;
主題確定模塊:用于當(dāng)所述博文是對其他博文的轉(zhuǎn)發(fā)和/或回復(fù)時,將所述博文的主題確定為所述博文所回復(fù)和/或所轉(zhuǎn)發(fā)的原始博文的主題,當(dāng)所述博文與其他博文無轉(zhuǎn)發(fā)和/或回復(fù)關(guān)系時,使用Twitter-LDA模型確定所述博文的主題;
索引建立模塊:用于在與所述主題相對應(yīng)的索引結(jié)構(gòu)的底層建立所述博文的索引;
閾值判斷模塊:用于判斷所述索引結(jié)構(gòu)的底層的索引數(shù)是否大于或等于預(yù)設(shè)閾值,如果是,觸發(fā)索引遷移模塊;
索引遷移模塊:用于將已存儲在所述索引結(jié)構(gòu)的底層的索引數(shù)據(jù)遷移至分布式存儲網(wǎng)絡(luò)中的第二節(jié)點。
6.如權(quán)利要求5所述的裝置,其特征在于,所述博文獲取模塊從微博系統(tǒng)中實時獲取用戶發(fā)布的博文之后還包括:
用戶確定模塊,用于確定發(fā)布所述博文的用戶;
用戶判斷模塊,用于判斷所述用戶是否為惡意用戶,如果否,觸發(fā)主題確定模塊。
7.如權(quán)利要求5所述的裝置,其特征在于,所述索引建立模塊建立所述索引之后還包括:
任務(wù)獲取模塊,用于獲取所述微博系統(tǒng)中的主節(jié)點下發(fā)的搜索任務(wù);所述搜索任務(wù)是由所述主節(jié)點根據(jù)用戶在搜索操作中給定的搜索關(guān)鍵字對應(yīng)的主題所分配的;
搜索執(zhí)行模塊,用于在所述索引結(jié)構(gòu)的底層搜索與所述關(guān)鍵字相匹配的索引,得到搜索結(jié)果;
結(jié)果發(fā)送模塊,用于將所述搜索結(jié)果發(fā)送至所述主節(jié)點,以便所述主節(jié)點綜合所述第一節(jié)點和所述第二節(jié)點的搜索結(jié)果得到所述主題的搜索結(jié)果,綜合所有主題的搜索結(jié)果,得到最終搜索結(jié)果。
8.如權(quán)利要求7所述的裝置,其特征在于,所述結(jié)果發(fā)送模塊綜合所述所有主題的搜索結(jié)果之前還包括:
排序模塊,用于對所述所有主題的搜索結(jié)果進行排序。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于中國人民解放軍國防科學(xué)技術(shù)大學(xué),未經(jīng)中國人民解放軍國防科學(xué)技術(shù)大學(xué)許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201410272487.9/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 上一篇:一種分散熒光染料、制備及應(yīng)用
- 下一篇:多功能智能電暖器





