[發明專利]一種用于數據統計的方法與設備在審
| 申請號: | 202011335086.5 | 申請日: | 2020-11-24 |
| 公開(公告)號: | CN112380479A | 公開(公告)日: | 2021-02-19 |
| 發明(設計)人: | 段穩過 | 申請(專利權)人: | 上海悅易網絡信息技術有限公司 |
| 主分類號: | G06F16/958 | 分類號: | G06F16/958 |
| 代理公司: | 上海百一領御專利代理事務所(普通合伙) 31243 | 代理人: | 汪祖樂;朱永海 |
| 地址: | 200433 上海市楊浦*** | 國省代碼: | 上海;31 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 用于 數據 統計 方法 設備 | ||
本申請通過一種用于數據統計的方法及設備,首先獲取基于預設時間點之前第一預設時間段內的數據,接著基于所述數據,確定與所述數據對應的按第二預設時間段統計的第一數據量,其中,所述第二預設時間段小于第一預設時間段,然后獲取基于預設時間點之后第二預設時間段內的數據,并基于所述數據,確定與所述數據對應的按第二預設時間段統計的第二數據量,最后合并計算所述第一數據量及所述第二數據量,以獲得第三數據量。通過該方法可在對周期性計算機數據進行統計時,在首次全量計算機數據統計的基礎上,后續每次只需要統計一個周期內的增量計算機數據,避免了每次大量計算機數據的重復統計,減少了數據計算量、提高了計算效率。
技術領域
本申請涉及計算機數據處理技術領域,尤其涉及一種用于數據統計的技術。
背景技術
在周期性處理時間跨度較大的計算機數據時,通常涉及的全量數據很大,若每次采用對全量數據進行計算的方式,計算量很大。通過增加計算資源的方式可以減少計算時間,例如增加計算機硬件配置,但這種方式會造成硬件成本增加。而且實際上前后兩次被處理的全量數據大部分都是相同的,效率低。
例如,統計某綜合網站30日內用戶訪問行為數據,用戶每次訪問或更新頁面,就會生成相應的一條日志數據,每天有500萬條日志數據生成,60天的日志數據量就是1.5億條。每天都需要對1.5億條數據進行處理、統計,但前后兩次處理、統計的數據,其中有1.45億條數據是相同的。
發明內容
本申請的目的是提供一種用于數據統計的方法,用以解決現有對周期性計算機數據的統計效率不高的技術問題。
根據本申請的一個方面,提供了一種用于數據統計的方法,其中,所述方法包括:
獲取基于預設時間點之前第一預設時間段內的數據;
基于所述數據,確定與所述數據對應的按第二預設時間段統計的第一數據量,其中,所述第二預設時間段小于第一預設時間段;
獲取基于預設時間點之后第二預設時間段內的數據,并基于所述數據,確定與所述數據對應的按第二預設時間段統計的第二數據量;
合并計算所述第一數據量及所述第二數據量,以獲得第三數據量。
可選地,其中,所述第一時間段是第二時間段的N倍,其中,所述N為正整數。
可選地,其中,所述方法還包括:
清除所述第一數據量中第一個第二預設時間段的數據量,以獲得第四數據量;
合并計算所述第四數據量及所述第二數據量,以獲得第五數據量。
可選地,其中,所述數據包括:
用戶的訪問行為;
訪問的網頁地址;
訪問的時間;
訪問時長。
根據本申請的另一方面,還提供了一種用于數據統計的設備,其中,所述設備包括:
第一裝置,用于獲取基于預設時間點之前第一預設時間段內的數據;
第二裝置,用于基于所述數據,確定與所述數據對應的按第二預設時間段統計的第一數據量,其中,所述所述第二預設時間段小于第一預設時間段;
第三裝置,用于獲取基于預設時間點之后第二預設時間段內的數據,并基于所述數據,確定與所述數據對應的按第二預設時間段統計的第二數據量;
第四裝置,用于合并計算所述第一數據量及所述第二數據量,以獲得第三數據量。
可選地,所述設備還包括:
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于上海悅易網絡信息技術有限公司,未經上海悅易網絡信息技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202011335086.5/2.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





