[發明專利]數據處理方法、裝置、電子設備及計算機可讀介質

在審

• 申請號: 202010152250.2
• 申請日: 2020-03-06
• 公開（公告）號: CN113360474A
• 公開（公告）日: 2021-09-07
• 發明（設計）人: 康進;王彧博;曹正偉
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: G06F16/21
• 分類號: G06F16/21;G06F16/22;G06F16/25
• 代理公司: 北京合智同創知識產權代理有限公司 11545
• 代理人: 李杰;舒道宏

1.一種數據處理方法，所述方法包括：

對從不同的數據源實時獲取的業務對象數據進行統一解析，以獲得用于生成業務對象數據表的業務對象結構化數據；

將所述業務對象結構化數據分別加載至第一數據倉庫和第二數據倉庫，使得所述第一數據倉庫根據所述業務對象結構化數據實時生成所述業務對象數據表，并且使得所述第二數據倉庫根據所述業務對象結構化數據離線生成預設時間段內的所述業務對象數據表。

2.根據權利要求1所述的方法，其中，所述對從不同的數據源實時獲取的業務對象數據進行統一解析之前，所述方法還包括：

對從不同的所述數據源實時獲取的所述業務對象數據進行清洗，以獲得清洗后的所述業務對象數據；

所述對從不同的數據源實時獲取的業務對象數據進行統一解析，包括：

對清洗后的所述業務對象數據進行統一解析，以獲得用于生成所述業務對象數據表的所述業務對象結構化數據。

3.根據權利要求1所述的方法，其中，所述對從不同的數據源實時獲取的業務對象數據進行統一解析，包括：

對從不同的所述數據源實時獲取的所述業務對象數據的數據格式進行轉換，以獲得具有統一數據格式的所述業務對象數據；

對所述具有統一數據格式的所述業務對象數據進行結構化，以獲得所述業務對象結構化數據。

4.根據權利要求3所述的方法，其中，所述業務對象結構化數據包括為所述業務對象數據標識的類型數據，

所述對所述具有統一數據格式的所述業務對象數據進行結構化，包括：

對所述具有統一數據格式的所述業務對象數據進行類型標識，以獲得為所述業務對象數據標識的類型數據。

5.根據權利要求1-4中任意一項權利要求所述的方法，其中，所述業務對象數據包括以下中的至少一者：針對業務對象的操作數據、針對所述業務對象進行操作的地域數據、所述業務對象的投放數據。

6.根據權利要求5所述的方法，其中，所述針對業務對象的操作數據包括以下中的至少一者：針對所述業務對象的展現操作數據、針對所述業務對象的點擊操作數據、針對所述業務對象關聯的商品的購買操作數據、針對所述業務對象的請求操作數據、針對所述業務對象的下發操作數據。

7.一種數據處理方法，所述方法包括：

第一數據倉庫獲取ETL工具加載的用于生成第一業務對象數據表的業務對象結構化數據，所述業務對象結構化數據為所述ETL工具對從不同的數據源實時獲取的業務對象數據進行統一解析獲得的；

所述第一數據倉庫根據所述業務對象結構化數據實時生成所述第一業務對象數據表；

所述第一數據倉庫將所述第一業務對象數據表導入業務對象投放平臺進行展示。

8.根據權利要求7所述的方法，其中，所述第一數據倉庫根據所述業務對象結構化數據實時生成所述第一業務對象數據表，包括：

通過所述第一數據倉庫的存放層，存放所述業務對象結構化數據；

通過所述第一數據倉庫的統計層，對所述業務對象結構化數據進行統計，以獲得所述業務對象結構化數據的明細數據；

通過所述第一數據倉庫的匯總層，對所述業務對象結構化數據的明細數據進行匯總，以獲得所述業務對象結構化數據的匯總結果；

通過所述第一數據倉庫的應用層，應用所述業務對象結構化數據的匯總結果，以實時生成所述第一業務對象數據表。

9.根據權利要求7所述的方法，其中，所述方法還包括：

當所述第一數據倉庫實時生成所述第一業務對象數據表出現故障時，所述第一數據倉庫獲取第二數據倉庫根據所述業務對象結構化數據離線生成的預設時間段內的第二業務對象數據表，并根據所述第二業務對象數據表實時生成所述第一業務對象數據表。