[發明專利]一種收集、分析和分發網絡商業信息的系統數據組件

在審

• 申請號: 201310395434.1
• 申請日: 2013-09-03
• 公開（公告）號: CN103473636A
• 公開（公告）日: 2013-12-25
• 發明（設計）人: 沈效國
• 申請（專利權）人: 沈效國
• 主分類號: G06Q10/06
• 分類號: G06Q10/06;G06F17/30
• 代理公司: 南京瑞弘專利商標事務所(普通合伙) 32249
• 代理人: 陳建和

1.收集、分析和分發網絡商業信息的系統數據組件，其特征是所述系統的數據組件：主要包括信息收集模塊、信息處理模塊、信息交換模塊、信息分發模塊及其相應的程序；自動化、構建和管理收集、分析和分發網絡商業信息的關鍵業務流程，將系統數據組件統一部署在提供商業信息的服務平臺上，系統數據組件根據商業信息的實際應用需求，通過網絡匯聚、挖掘和提供所需商業信息數據，系統服務模式的商業信息資源是應用對象，在系統數據組件應用模式下，這些資源屬于不同的網絡節點，節點系統之間的商業數據彼此物理或者邏輯上獨立；對商業信息資源應用操作稱為方法，方法按業務邏輯組合到若干業務類內的程序服務模塊，業務類的特性組成屬性，接口是業務類的抽象及實現對象，業務類通過繼承父類中的方法；同時，業務類之間存在相互的關系和約束，以上各個元素的有序集合組成了基于收集、分析和分發網絡商業信息的系統數據組件部署的網絡商業信息收集、分析和分發的程序服務模塊構成的服務平臺；操作由簽名和操作內容組成；

所述系統的數據組件采用基于中間件的業務集成方法，用中間件實現網絡商業信息應用業務流程集成，基于數據組件部署模式的系統集成方法采用分層模塊架構，包括：負載層、邏輯層、數據搜索層和數據中心層，業務流程定制了消息格式，按照功能實現方法實現網絡商業信息收集、分析和分發控制規則鏈的業務集成；

模塊-1：負載層，完成負載均衡，控制流量，防止DDOS攻擊；采用開源的nginx技術，架構在linux上，根據需要可以零成本的部署到多臺負載機器上，以分層的結構再次負載；

模塊-2：前端展示層，也叫邏輯層；主要完成與數據中心數據存取，與搜索層結果交互，與負載層數據交換；

模塊3：數據搜索層，該層主要解決數據處理和歸類需求，是整個系統的核心部分：具體來說就把原始數據根據展示層需求進行分級，整理和重組，以一個開源文本的形式（xml/json）返回給展示層，同時在滿足業務邏輯的基礎上要求以ms級別的處理時間來滿足需求，并且吞吐量被設計為滿足并發1w/s；采用solr技術來處理，并且在此基礎上增加滿足并發的hadoop的并行處理基礎，用zookeeper來統一管理；

模塊4：數據中心層，數據中心采用成熟的ORACLE技術，由數據中心分發到各個前端展示層的mssql輕量級數據庫中。

2.根據權利要求1所述的收集、分析和分發網絡商業信息的系統數據組件，其特征是上述模塊通過子類化方式進行功能擴展，適用于大規模碎片化商業信息的收集、處理、交換、分發特性、具有可重用的商業信息應用管理控制框架；

所述子類化方式進行功能擴展，其每個管理控制由一張或多張表加一個默認目標組成，其中BEGIN表是系統內建表，所有控制從BEGIN開始；每張表可以定義若干條“鏈”，在一張表中控制按順序從上到下對規則鏈進行匹配；數據業務應用的規則鏈通過系統數據組件的主要功能模塊組合：由一個目標和任意個匹配模塊和標記模塊組成；

在表中，按業務應用需要添加、刪除、編輯或反轉規則鏈；

在“請求業務應用”內有一個系統表：“BEGIN表”；

在“回應業務應用”內有兩個系統表“BEGIN表”和“POSTMAP表”；

“POSTMAP表”完成url到物理文件的映射；使用“POSTMAP表”，自

行創建；

如果發現業務應用的請求匹配了一個規則鏈中的匹配模塊，則進入標

記模塊對請求做簡單的處理，之后就按該條規則鏈指定的目標處理；

如果目標是繼續，則還要進行下一條規則鏈處理，否則就返回控制，

按控制“目標”進行處理；

如果目標是“繼續”，則還要進行下一條規則鏈的處理；

如果目標是“默認”，則控制按默認目標處理；如果目標是“拒絕”，

則將對用戶的請求拒絕并發送錯誤信息給用戶，之后中斷連接。

3.根據權利要求1所述的收集、分析和分發網絡商業信息的系統數據組件，其特征是所述系統數據組件，將商業信息的收集、處理、交換、分發的資源、規則、應用、控制等在框架內實現，作為獨立的中間件，在服務器系統需要商業數據應用控制時，通過配置搭建商業信息資源的系統控制管理環境將該中間件外掛在服務平臺（應用系統）上，而應用系統移除管理控制時，中間件脫離應用系統，不影響應用系統繼續運行；一個中間件同時支持并控制多個服務平臺即應用系統。