[發明專利]貨值數據分析方法及系統

在審

• 申請號: 202011117211.5
• 申請日: 2020-10-19
• 公開（公告）號: CN112364071A
• 公開（公告）日: 2021-02-12
• 發明（設計）人: 彭浩;李柯辰;何偉;唐宏禹;魏戰松;付文強
• 申請（專利權）人: 珠海市卓軒科技有限公司
• 主分類號: G06F16/2458
• 分類號: G06F16/2458;G06F3/0486;G06F9/48;G06F16/951;G06Q50/16
• 代理公司: 廣州嘉權專利商標事務所有限公司 44205
• 代理人: 葉琦煒

本發明公開了一種貨值數據分析方法及系統，該方法包括以下步驟：地產貨值數據的采集和存儲，通過預置組件采集地產經營中各階段各業務的貨值數據，配置貨值數據的轉換、調度、監控及傳輸，將貨值數據存入設定模板；地產貨值數據的計算，采用大數據技術對貨值數據進行地產全周期的分析計算。本發明至少具有以下有益效果：提供了地產行業的全周期貨值數據采集分析方法，能夠采集行業內不同來源的數據，讓不同來源、不同格式、不同性質的數據在邏輯上或物理上有機地集中，通過應用間的數據有效流通和高效管理從而達到數據的匯聚進而實現地產全周期貨值數據的快速分析計算。

技術領域

本發明涉及計算機數據分析技術領域，特別涉及一種貨值數據分析方法及系統。

背景技術

隨著地產行業進入精細化運營，早期的地產貨值分析已經不能適用于目前的精細化運營需求，早期地產的貨值分析是由營銷負責，而營銷只有在取得預售證之后才會對貨值情況進行精細化統計，此時已處于地產周期價值鏈中的末端，而地產的貨值在設計規劃階段就能夠基本確定。此外，目前的地產行業各系統處于分散、獨立的狀況，業務之間數據資源不僅處于孤立狀態，數據資源的一致性和互用性也較差，數據資源的價值無法充分發揮，數據之間的集成也是無章可循。傳統的數據倉庫因為存儲計算問題只取了單個或者兩個左右系統的結構化數據，針對地產貨值數據全周期所涉及系統的數據規模會到TB級并存在多種數據庫型、多數據結構，傳統數位在數據規模到TB級別時，分析、挖掘能力變弱。

發明內容

本發明旨在至少解決現有技術中存在的技術問題之一。為此，本發明提出一種貨值數據分析方法，能夠采集行業內各種貨值數據，讓不同來源、不同格式、不同性質的數據在邏輯上或物理上有機地集中和匯聚從而實現地產全周期的貨值數據計算分析。

本發明還提出一種具有上述貨值數據分析方法的貨值數據分析系統。

根據本發明的第一方面實施例的一種貨值數據分析方法，包括以下步驟：地產貨值數據的采集和存儲，通過預置組件采集地產經營中各階段各業務的貨值數據，配置所述貨值數據的轉換、調度、監控及傳輸，將所述貨值數據存入設定模板；地產貨值數據的計算，采用大數據技術對所述貨值數據進行地產全周期的分析計算。

根據本發明的一些實施例，所述地產貨值數據的計算包括以下步驟：部署大數據集群；構建支持多種開發編程模型的地產任務執行機；通過拖拽方式操作地產任務節點及所述地產任務節點間的依賴關系并設置地產任務的觸發機制；設置所述地產任務資源調度策略；配置告警策略；提交并運維所述地產任務。

根據本發明的一些實施例，所述多種開發編程模型包括Python、Shell、Hive、Spark及DataIn。

根據本發明的一些實施例，所述通過拖拽方式操作包括添加操作、修改操作、查詢操作以及刪除操作。

根據本發明的一些實施例，設置所述地產任務資源調度策略包括設置周期性資源調度策略，所述周期單位是次、分鐘、小時、天、周及月。

根據本發明的一些實施例，所述告警策略包括：失敗告警、延遲告警及執行超時告警。

根據本發明的一些實施例，所述預置組件包括Kafka、flume及Sqoop。

根據本發明的一些實施例，所述貨值數據的來源包括地產業務信息、地產網絡日志及通過網絡爬蟲收集的地產網絡數據。

根據本發明的第二方面實施例的一種貨值數據分析系統，包括：地產貨值數據采集存儲模塊，所述地產貨值數據采集存儲模塊包括數據源單元；數據采集單元，所述數據采集單元被配置為通過預置組件采集地產經營中各階段各業務的貨值數據，并配置所述貨值數據的轉換、調度、監控及傳輸；數據存儲單元，所述數據存儲單元被配置為將所述貨值數據存入設定模板；地產貨值數據計算模塊，用于采用大數據技術對所述貨值數據進行地產全周期的分析計算。