[發明專利]數據收集分發方法及裝置在審
| 申請號: | 201810793438.8 | 申請日: | 2018-07-18 |
| 公開(公告)號: | CN108900434A | 公開(公告)日: | 2018-11-27 |
| 發明(設計)人: | 侯云飛 | 申請(專利權)人: | 北京木瓜移動科技股份有限公司 |
| 主分類號: | H04L12/865 | 分類號: | H04L12/865 |
| 代理公司: | 北京超凡志成知識產權代理事務所(普通合伙) 11371 | 代理人: | 王術蘭 |
| 地址: | 100000 北京市海淀區學*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據源 隊列 數據收集 分發 數據處理領域 發送 數據分類 有效處理 數據量 子隊列 | ||
1.一種數據收集分發方法,其特征在于,所述方法包括:
獲取多個數據源;
獲取所述多個數據源的優先級;
基于所述多個數據源的優先級將所述多個數據源分為多個隊列;
基于所述多個數據源的不同的數據分類將每個隊列分為多個子隊列;
基于每個隊列的優先級及每個子隊列的優先級,對所述多個數據源進行發送。
2.根據權利要求1所述的方法,其特征在于,獲取所述多個數據源的優先級,包括:
判斷所述多個數據源中是否攜帶有優先級標簽;
若是,則從所述多個數據源中獲取所述多個數據源的優先級;
若否,則為未攜帶有所述優先級標簽的數據源按照預設規則分配對應的優先級。
3.根據權利要求1所述的方法,其特征在于,基于所述多個數據源的優先級將所述多個數據源分為多個隊列,包括:
將具有相同優先級的數據源分為同一個隊列,以獲得多個隊列。
4.根據權利要求3所述的方法,其特征在于,基于所述多個數據源的不同的數據分類將每個隊列分為多個子隊列,包括:
將所述同一個隊列中的數據源按照不同的數據類型分為多個子隊列;或者
將所述同一個隊列中的數據源按照不同的數據主題分為多個子隊列;或者
將所述同一個隊列中的數據源按照不同的數據源IP分為多個子隊列。
5.根據權利要求1所述的方法,其特征在于,基于所述多個數據源的不同的數據分類將每個隊列分為多個子隊列之后,基于每個隊列的優先級及每個子隊列的優先級,對所述多個數據源進行發送之前,所述方法還包括:
為每個子隊列分配對應的CPU資源及內存資源;
基于每個子隊列的CPU資源及內存資源確定每個子隊列的優先級。
6.一種數據收集分發裝置,其特征在于,所述裝置包括:
數據獲取模塊,用于獲取多個數據源;
優先級獲取模塊,用于獲取所述多個數據源的優先級;
隊列劃分模塊,用于基于所述多個數據源的優先級將所述多個數據源分為多個隊列;
子隊列劃分模塊,用于基于所述多個數據源的不同的數據分類將每個隊列分為多個子隊列;
數據發送模塊,用于基于每個隊列的優先級及每個子隊列的優先級,對所述多個數據源進行發送。
7.根據權利要求6所述的裝置,其特征在于,所述優先級獲取模塊,具體用于判斷所述多個數據源中是否攜帶有優先級標簽;若是,則從所述多個數據源中獲取所述多個數據源的優先級;若否,則為未攜帶有所述優先級標簽的數據源按照預設規則分配對應的優先級。
8.根據權利要求6所述的裝置,其特征在于,所述隊列劃分模塊,用于將具有相同優先級的數據源分為同一個隊列,以獲得多個隊列。
9.根據權利要求8所述的裝置,其特征在于,所述子隊列劃分模塊,用于將所述同一個隊列中的數據源按照不同的數據類型分為多個子隊列;或者
將所述同一個隊列中的數據源按照不同的數據主題分為多個子隊列;或者
將所述同一個隊列中的數據源按照不同的數據源IP分為多個子隊列。
10.根據權利要求6所述的裝置,其特征在于,所述裝置還包括:
資源分配模塊,用于為每個子隊列分配對應的CPU資源及內存資源;基于每個子隊列的CPU資源及內存資源確定每個子隊列的優先級。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京木瓜移動科技股份有限公司,未經北京木瓜移動科技股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201810793438.8/1.html,轉載請聲明來源鉆瓜專利網。





