[發明專利]一種數據清洗方法、服務器及計算機可讀存儲介質有效
| 申請號: | 201910163985.2 | 申請日: | 2019-03-05 |
| 公開(公告)號: | CN110046151B | 公開(公告)日: | 2023-08-11 |
| 發明(設計)人: | 張森 | 申請(專利權)人: | 努比亞技術有限公司 |
| 主分類號: | G06F16/215 | 分類號: | G06F16/215 |
| 代理公司: | 深圳協成知識產權代理事務所(普通合伙) 44458 | 代理人: | 章小燕 |
| 地址: | 518057 廣東省深圳市南山區高新區北環大道9018*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 數據 清洗 方法 服務器 計算機 可讀 存儲 介質 | ||
1.一種數據清洗方法,應用于服務器,其特征在于,所述方法包括:
接收數據清洗條件,其中,所述數據清洗條件包括時間區間、事件信息和事件條件;
將所述時間區間劃分為至少兩個時間子區間;
獲取每個時間子區間內,所述事件信息的預清洗數據;
統計所述至少兩個時間子區間內,所述事件信息的預清洗數據;
根據所述事件條件對所述統計的預清洗數據進行篩選,得到數據清洗結果;
其中,所述將所述時間區間劃分為至少兩個時間子區間之前,所述方法還包括:
確定所述時間區間的劃分粒度;
所述將所述時間區間劃分為至少兩個時間子區間,包括:
根據所述劃分粒度將所述時間區間劃分為至少兩個時間子區間;
其中,所述獲取每個時間子區間內,所述事件信息的預清洗數據,包括:
在時間子區間內,根據所述事件信息對事件表進行預清洗,得到所述時間子區間內所述事件信息的預清洗數據;
其中,所述在時間子區間內,根據所述事件信息對事件表進行預清洗,得到所述時間子區間內所述事件信息的預清洗數據之前,所述方法還包括:
針對每一時間子區間,查找所述服務器是否存儲時間子區間內,所述事件信息的預清洗數據;
若所述服務器存儲第一時間子區間內,所述事件信息的預清洗數據,獲取所述第一時間子區間內所述事件信息的預清洗數據;
所述在時間子區間內,根據所述事件信息對事件表進行預清洗,得到所述時間子區間內所述事件信息的預清洗數據,包括:
若所述服務器沒有存儲第二時間子區間內,所述事件信息的預清洗數據,在所述第二時間子區間內,根據所述事件信息對事件表進行預清洗,得到所述第二時間子區間內所述事件信息的預清洗數據。
2.如權利要求1所述的數據清洗方法,其特征在于,所述在第二時間子區間內,根據所述事件信息對事件表進行預清洗,得到所述第二時間子區間內所述事件信息的預清洗數據之后,所述方法還包括:
存儲所述第二時間子區間內,所述事件信息的預清洗數據。
3.如權利要求1所述的數據清洗方法,其特征在于,所述確定所述時間區間的劃分粒度,包括:
根據單位查看數據量和所述服務器的最大搜索數據量,確定所述時間區間的劃分粒度,其中,所述單位查看數據量包括查看事件表中單位時間區間的記錄所需的數據量。
4.如權利要求1所述的數據清洗方法,其特征在于,所述數據清洗條件還包括用戶屬性;
所述根據所述事件條件對所述統計的預清洗數據進行篩選,得到數據清洗結果,包括:
根據所述事件條件和用戶屬性,對所述統計的預清洗數據進行篩選,得到數據清洗結果。
5.如權利要求1所述的數據清洗方法,其特征在于,所述事件信息包括事件行為和事件屬性。
6.一種服務器,其特征在于,所述服務器包括存儲器、至少一個處理器及存儲在所述存儲器上并可在所述至少一個處理器執行的至少一個程序;
所述至少一個程序被所述至少一個處理器執行時實現上述權利要求1~5任一項所述的方法中的步驟。
7.一種計算機可讀存儲介質,所述計算機可讀存儲介質存儲有計算機可執行的至少一個程序,其特征在于,所述至少一個程序被所述計算機執行時使所述計算機執行上述權利要求1~5任一項所述的方法中的步驟。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于努比亞技術有限公司,未經努比亞技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201910163985.2/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種人力資源監控分析方法及系統
- 下一篇:一種處理用電數據缺失值的方法
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





