[發明專利]貨值數據分析方法及系統

在審

• 申請號: 202011117211.5
• 申請日: 2020-10-19
• 公開（公告）號: CN112364071A
• 公開（公告）日: 2021-02-12
• 發明（設計）人: 彭浩;李柯辰;何偉;唐宏禹;魏戰松;付文強
• 申請（專利權）人: 珠海市卓軒科技有限公司
• 主分類號: G06F16/2458
• 分類號: G06F16/2458;G06F3/0486;G06F9/48;G06F16/951;G06Q50/16
• 代理公司: 廣州嘉權專利商標事務所有限公司 44205
• 代理人: 葉琦煒

1.一種貨值數據分析方法，其特征在于，包括以下步驟：

地產貨值數據的采集和存儲，通過預置組件采集地產經營中各階段各業務的貨值數據，配置所述貨值數據的轉換、調度、監控及傳輸，將所述貨值數據存入設定模板；

地產貨值數據的計算，采用大數據技術對所述貨值數據進行地產全周期的分析計算。

2.根據權利要求1所述的貨值數據分析方法，其特征在于，所述地產貨值數據的計算包括以下步驟：

部署大數據集群；

構建支持多種開發編程模型的地產任務執行機；

通過拖拽方式操作地產任務節點及所述地產任務節點間的依賴關系并設置地產任務的觸發機制；

設置所述地產任務資源調度策略；

配置告警策略；

提交并運維所述地產任務。

3.根據權利要求2所述的貨值數據分析方法，其特征在于，所述多種開發編程模型包括Python、Shell、Hive、Spark及DataIn。

4.根據權利要求2所述的貨值數據分析方法，其特征在于，所述通過拖拽方式操作包括添加操作、修改操作、查詢操作以及刪除操作。

5.根據權利要求2所述的貨值數據分析方法，其特征在于，設置所述地產任務資源調度策略包括設置周期性資源調度策略，所述周期單位是次、分鐘、小時、天、周及月。

6.根據權利要求2所述的貨值數據分析方法，其特征在于，所述告警策略包括：失敗告警、延遲告警及執行超時告警。

7.根據權利要求1所述的貨值數據分析方法，其特征在于，所述預置組件包括Kafka、flume及Sqoop。

8.根據權利要求1所述的貨值數據分析方法，其特征在于，所述貨值數據的來源包括地產業務信息、地產網絡日志及通過網絡爬蟲收集的地產網絡數據。

9.一種貨值數據分析系統，其特征在于，包括：

地產貨值數據采集存儲模塊，所述地產貨值數據采集存儲模塊包括數據源單元；數據采集單元，所述數據采集單元被配置為通過預置組件采集地產經營中各階段各業務的貨值數據，并配置所述貨值數據的轉換、調度、監控及傳輸；數據存儲單元，所述數據存儲單元被配置為將所述貨值數據存入設定模板；

地產貨值數據計算模塊，用于采用大數據技術對所述貨值數據進行地產全周期的分析計算。

10.根據權利要求9所述的貨值數據分析系統，其特征在于，所述地產貨值數據計算模塊包括：大數據集群單元，用于部署大數據集群；任務執行機單元，用于構建支持多種開發編程模型的地產任務執行機；作業操作單元，用于通過拖拽方式操作地產任務節點及所述地產任務節點間的依賴關系并設置地產任務的觸發機制；資源調度單元，用于設置所述地產任務資源調度策略；監控告警單元，用于配置告警策略；任務發布單元，用于提交所述地產任務；任務運維單元，用于對所述地產任務進行上線下線操作，包括對地產任務實例運行狀態進行查看、終止、重跑、修改及依賴操作。