[發明專利]熱點事件監控方法、裝置、計算機裝置及可讀存儲介質

有效

• 申請號: 202010317174.6
• 申請日: 2020-04-21
• 公開（公告）號: CN111538891B
• 公開（公告）日: 2023-04-07
• 發明（設計）人: 黃晨;張蓓;劉屹;徐楠;萬正勇;沈志勇;高宏
• 申請（專利權）人: 招商局金融科技有限公司
• 主分類號: G06F16/9532
• 分類號: G06F16/9532;G06F16/9537
• 代理公司: 深圳市沃德知識產權代理事務所(普通合伙) 44347
• 代理人: 高杰;于志光

1.一種熱點事件監控方法，其特征在于，所述方法包括：

從獲取到的涉及目標事件的新聞流中提取所述目標事件的關鍵詞流，并利用預設過濾規則對所述關鍵詞流進行過濾，以根據過濾得到的多個關鍵詞構建關鍵詞集；

根據所述關鍵詞集中的關鍵詞的時間戳將所述關鍵詞集切分為多個非固定大小的時間窗口，其中每一所述時間窗口內的關鍵詞數量相等；

對每一所述時間窗口內的關鍵詞進行亂序處理，移除所述關鍵詞的時間戳并記錄每一所述時間窗口的時間跨度信息；

基于預設緩存過濾器對經過亂序處理的時間窗口內的關鍵詞進行篩選與過濾，包括：將經過亂序處理的時間窗口內的關鍵詞依序插入所述預設緩存過濾器，以對所述時間窗口內的關鍵詞進行篩選與過濾，其中，當所述預設緩存過濾器中的緩存位置被關鍵詞占滿時，若有不存在于所述緩存位置中的關鍵詞插入，則所述預設緩存過濾器將最下層的關鍵詞從所述緩存位置中移除并在最上層插入所述關鍵詞，若有已存在于所述緩存位置中的關鍵詞再次插入，則所述預設緩存過濾器將所述關鍵詞的位置調整為最上層；及

利用預設監測與更新機制對經過篩選與過濾處理的時間窗口內的關鍵詞進行時間維度與熱度維度分析，以得到所述關鍵詞集的事件特征關鍵詞，所述預設監測與更新機制包括冷啟動機制、監控機制及更新機制，其中：

所述冷啟動機制包括：a.對關鍵詞流進行預處理和緩存過濾得到多個時間窗口的輸出，每個輸出包括窗口全局的平均熱度以及數量與緩存大小相同的多個關鍵詞和相對熱度的配對；b.將關鍵詞熱度以及對應窗口的結束時間合并成記錄插入儲存結構中的關鍵詞出現記錄表，并將窗口全局的平均熱度插入所述關鍵詞出現記錄表；c.更新所述儲存結構的統計信息；d，對每個時間窗口執行上述步驟a～c一次，循環直到所有的冷啟動數據集都完成以上操作；

所述監控機制包括：當某個關鍵詞未記錄在所述關鍵詞出現記錄表中時，提取當前時刻關鍵詞統計信息表中窗口全局平均熱度EMA_allframe,t，計算熱度閾值threshold_t,keyword＝a*EMA_allframe,t，其中a為大于1的常數，若該關鍵詞在當前時間點的相對熱度超過所述熱度閾值，則將該關鍵詞加入當前時間窗口的輸出中；或者，當該關鍵詞記錄在所述關鍵詞出現記錄表中時，提取當前時刻該關鍵詞在統計信息表中的指數滑動平均EMA_keyword,t與標準差std_keyword,t，計算熱度閾值threshold_t,keyword＝EMA_keyword,t+b*std_keyword,t，調整b的值設定關鍵詞頻率的異常值，若該關鍵詞在當前時間點的相對熱度超過所述熱度閾值，則將該關鍵詞加入當前時間窗口的輸出中；

所述更新機制對所述儲存結構存儲的內容進行更新。

2.如權利要求1所述的方法，其特征在于，所述關鍵詞的時間戳記錄了所述關鍵詞的獲取時間，或記錄了所述關鍵詞所屬的新聞的發布時間。

3.如權利要求1所述的方法，其特征在于，所述記錄每一所述時間窗口的時間跨度信息的步驟包括：

獲取所述時間窗口內的關鍵詞的時間戳所記錄的最大時間與最小時間，以根據所述最大時間與所述最小時間生成并記錄所述時間窗口的時間跨度信息。

4.如權利要求1的方法，其特征在于，所述預設緩存過濾器還存儲有所述緩存位置中的關鍵詞的熱度信息，當所述關鍵詞從所述緩存位置中移除時，所述關鍵詞的熱度信息被清零，當有已存在于所述緩存位置中的關鍵詞再次插入時，所述關鍵詞的熱度信息自增一預設值。

5.如權利要求4的方法，其特征在于，所述方法還包括：

當所述時間窗口內的關鍵詞完成插入至所述預設緩存過濾器時，對所述預設緩存過濾器中所保留的關鍵詞的熱度信息進行懲罰運算，以得到每一所述關鍵詞的相對熱度；及

將所述預設緩存過濾器中的關鍵詞的相對熱度作為所述時間窗口的下一時間窗口所繼承的關鍵詞的熱度信息。