[發明專利]數據處理方法、裝置、設備和存儲介質在審
| 申請號: | 202110862607.0 | 申請日: | 2021-07-29 |
| 公開(公告)號: | CN113590040A | 公開(公告)日: | 2021-11-02 |
| 發明(設計)人: | 張雁南;李濤 | 申請(專利權)人: | 鄭州阿帕斯數云信息科技有限公司 |
| 主分類號: | G06F3/06 | 分類號: | G06F3/06 |
| 代理公司: | 北京國昊天誠知識產權代理有限公司 11315 | 代理人: | 姜鳳巖 |
| 地址: | 450046 河南省鄭州市鄭東新區*** | 國省代碼: | 河南;41 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據處理 方法 裝置 設備 存儲 介質 | ||
1.一種數據處理方法,其特征在于,包括:
獲取第一數據集群和第二數據集群的數據處理狀態;所述第一數據集群和所述第二數據集群共同組成用于存儲業務數據的業務數據存儲集群;所述數據處理狀態包括允許數據寫入和允許數據處理;
根據所述數據處理狀態,在所述第一數據集群和所述第二數據集群中確定第一數據寫入集群和第一數據處理集群,在所述第一數據寫入集群中寫入業務數據,以及,利用所述第一數據處理集群進行業務數據處理;
在業務數據寫入完成后,切換所述第一數據寫入集群和所述第一數據處理集群的數據處理狀態,以使所述第一數據寫入集群變更為第二數據處理集群,使所述第一數據處理集群變更為第二數據寫入集群;
在所述第二數據寫入集群中寫入業務數據,以及,利用所述第二數據處理集群進行業務數據處理。
2.根據權利要求1所述的方法,其特征在于,獲取第一數據集群和第二數據集群的數據處理狀態,包括:
從狀態存儲服務器中讀取第一數據集群和第二數據集群的數據處理狀態信息;
根據讀取的數據處理狀態信息,確定第一數據集群和第二數據集群的數據處理狀態;
其中,所述狀態存儲服務器用于存儲第一數據集群和第二數據集群的數據處理狀態信息。
3.根據權利要求1所述的方法,其特征在于,根據所述數據處理狀態,在所述第一數據集群和所述第二數據集群中確定第一數據寫入集群和第一數據處理集群,包括:
在所述第一數據集群和所述第二數據集群中,將數據處理狀態為允許數據寫入的集群確定為第一數據寫入集群,將數據處理狀態為允許數據處理的集群確定為第一數據處理集群。
4.根據權利要求1所述的方法,其特征在于,在所述第一數據寫入集群中寫入業務數據,包括:
在業務數據更新后,在所述第一數據寫入集群中寫入全量業務數據或者增量業務數據。
5.根據權利要求4所述的方法,其特征在于,所述業務數據包括人群包;所述第一數據寫入集群中預先存儲有各個用戶的用戶標識;在業務數據更新后,在所述第一數據寫入集群中寫入全量業務數據,包括:
在人群包更新后,獲取各個人群包的建立規則,所述建立規則用于表示所述人群包中所包含的用戶的用戶畫像的共性特征;
根據所述建立規則,從所述第一數據寫入集群中獲取每個所述人群包中所包含的用戶標識;
根據每個所述人群包中所包含的用戶標識,建立每個所述人群包并寫入所述第一數據寫入集群。
6.根據權利要求1所述的方法,其特征在于,所述第一數據處理集群在前次作為數據寫入集群的過程中被寫入有業務數據;利用所述第一數據處理集群進行業務數據處理,包括:
利用所述第一數據處理集群中存儲的業務數據,進行業務數據查詢和/或業務數據讀取。
7.根據權利要求1所述的方法,其特征在于,在所述第二數據寫入集群中寫入業務數據,包括:
在業務數據更新后,在所述第二數據寫入集群中寫入全量業務數據或者增量業務數據。
8.根據權利要求7所述的方法,其特征在于,所述業務數據包括人群包;所述第二數據寫入集群中預先存儲有各個用戶的用戶標識;在業務數據更新后,在所述第二數據寫入集群中寫入全量業務數據,包括:
在人群包更新后,獲取各個人群包的建立規則,所述建立規則用于表示所述人群包中所包含的用戶的用戶畫像的共性特征;
根據所述建立規則,從所述第二數據寫入集群中獲取每個所述人群包中所包含的用戶標識;
根據每個所述人群包中所包含的用戶標識,建立每個所述人群包并寫入所述第二數據寫入集群。
9.根據權利要求1所述的方法,其特征在于,所述第二數據處理集群在前次作為數據寫入集群的過程中被寫入有業務數據;利用所述第二數據處理集群進行業務數據處理,包括:
利用所述第二數據處理集群中存儲的業務數據,進行業務數據查詢和/或業務數據讀取。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于鄭州阿帕斯數云信息科技有限公司,未經鄭州阿帕斯數云信息科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202110862607.0/1.html,轉載請聲明來源鉆瓜專利網。





