[發明專利]一種基于數據平臺的數據控制方法

有效

• 申請號: 201310037541.7
• 申請日: 2013-01-31
• 公開（公告）號: CN103136335A
• 公開（公告）日: 2013-06-05
• 發明（設計）人: 蘇萌;柏林森;張韶峰;陳浪仙;龔亮;李渭民
• 申請（專利權）人: 北京千分點信息科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京國昊天誠知識產權代理有限公司 11315
• 代理人: 許志勇

技術領域

本發明涉及數據處理技術領域，尤其涉及一種基于數據平臺的數據控制方法。

背景技術

網站分析是對網站訪客行為的研究，對于數據平臺應用背景來說，網站分析特別指的是采集分析網站訪客的一系列用戶行為，分析是否符合達到網站的目標，范圍包括網站的推廣運營分析，用戶訪客的行為模式識別，以及銷售經營狀況的分析。

通用網站分析在國內發展日臻成熟，針對于不同的目標用戶，提供了眾多而又有所差別的產品，例如：

百度統計：可以提供實時的數據報表，支持熱力圖，百度收錄查詢，推廣評估，與百度推廣產品結合較深。

Google?Analytic：在免費工具中提供了可以和收費工具媲美的功能，功能相當完備強大，尤其高級細分，定制性比較強大。但是現在大陸訪問的Google服務器主要在香港，服務穩定性有時候會受到影響。

CNZZ：國內草根站長的熱愛，分析工具簡單易用，報告簡潔，部署簡易。

騰訊分析：第一款專用于社區的統計分析系統，尤其與Discuz結合更緊密。

維析：第三方的工具提供商，提供基本的數據分析外，“交叉統計”和“自定義報告”定制性比較強。信息中心Dashboard支持導出Excel報告。

WebTrends：WebTrends主要針對大用戶，可以在分析網站服務器端日志的同時支持pagetag數據的采集。WebTrends的數據分析報告全面精確，日志端數據收集方式比較受銀行等金融類客服青睞，但是收費比較高。

Omniture：現在隸屬于Adobe，涵蓋網站分析領域的各個方面，各類工具應有盡有，而且功能齊全，性能良好，但是同樣費用有點高，比較適合大型企業。

以上產品的主要特點是側重于面向通用網站業務，沒有針對數據平臺運行管理特點進行分析，而且無法單獨實現用戶在網站上的訪問行為數據與交互業務系統數據的整合并在統一框架下進行數據關聯控制，有助于防止因資源競爭引起的誤動作和提高安全性，同時由于海量數據導致數據搜索速度緩慢。

因此，當前需要一種基于數據平臺的數據控制的技術方案來解決上述問題。

發明內容

本發明所要解決的技術問題是提供一種基于數據平臺的數據控制方法，解決了當前無法針對數據平臺運行管理特點進行分析，且無法單獨實現用戶在網站上的訪問行為數據與交易業務系統數據的整合并在統一框架下進行數據關聯控制的問題，同時通過新的數據控制方式提高了數據搜索的速度。

為了解決上述問題，本發明提供了一種基于數據平臺的數據控制方法，包括：

獲取多個數據平臺的數據并對其進行整合，其中將用戶信息統一為全局唯一標識，將數據項信息統一為全局唯一標識；其中，整合后的數據包括數據平臺的用戶數據及數據項的原始數據，且整合后的數據包括對用戶行為的多維度描述以及對數據項的多維度描述，并包含線上和線下的數據；

對整合后的數據采用分布式處理框架的方式進行處理，并對整合后的數據通過歸一化、規范化和數據清洗操作進行處理，其中歸一化操作是指對數值數據進行歸一化操作；規范化操作是指將數據結構化地組織，保持數據完整性并減少冗余，增進數據的一致性；數據清洗操作是指針對不完整數據、錯誤數據、重復數據進行數據清洗；

提取處理后的數據并進行報表展示。

與現有技術相比，應用本發明，可以通過數據平臺的數據，將用戶在網站上的訪問行為數據與交易業務系統數據整合并在統一框架下進行數據關聯控制，進而實現對數據平臺網站的情況進行多維分析，并且可視化強，同時通過新的數據控制方式提高了數據搜索的速度，該方式不僅可以提升數據平臺運營商的運營數據分析能力，還可以降低運營成本。

附圖說明

為了更清楚地說明本發明實施例的技術方案，下面將對實施例描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本發明的一些實施例，對于本領域普通技術人員來講，在不付出創造性勞動的前提下，還可以根據這些附圖獲得其他的附圖。

圖1為本發明實施例的運行管理分析系統總體架構的示意圖；

圖2為本發明實施例的運行管理分析數據處理流程示意圖；

圖3為本發明實施例的展示引擎模塊圖的示意圖；

圖4為本發明實施例的業務邏輯模塊處理流程的示意圖；

圖5為本發明實施例的數據模塊工作流程的示意圖；

圖6為本發明實例的用戶訪問“訪客分布”主題及分析維度、分析指標的顯示數據的示意圖；