[發明專利]一種基于云計算的大規模熱連軋數據主題定制系統

無效

• 申請號: 201310130442.3
• 申請日: 2013-04-16
• 公開（公告）號: CN103198138A
• 公開（公告）日: 2013-07-10
• 發明（設計）人: 鄒麗暉;張德政;華鎮;阿孜古麗;孫義;謝永紅;劉宏嵐;杜鑫
• 申請（專利權）人: 北京科技大學
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京金智普華知識產權代理有限公司 11401
• 代理人: 皋吉甫

1.一種基于云計算的熱連軋數據主題定制系統，其特征在于，所述系統包括ETL（信息抽?。┠K、數據持久層模塊和主題定制模塊；

ETL（信息抽取）模塊，用于解析熱連軋系統數據結構，生成數據字典文件和表頭文件，將數據字典文件和表頭文件發送至數據持久層模塊，并定時對熱連軋系統采集文本數據進行格式化；

數據持久層模塊，數據持久層模塊用于根據從ETL模塊接收的所述數據字典文件和表頭文件為云數據倉庫構建數據字典和數據表，并定時將格式化后的采集文本數據歸并入云數據倉庫；

主題定制模塊，基于云數據倉庫進行主題定制。

2.如權利要求1所述的熱連軋數據主題定制系統，其特征在于，ETL模塊包括：

數據結構解析單元，用于解析熱連軋系統數據結構生成數據字典文件和表頭文件；

結構化模板庫生成單元，用于對數據結構解析單元生成的表頭文件進行格式化生成結構化模板庫的模版文件；

文本數據格式化單元，用于將結構化模板庫里的模版文件定時加載入數據解析模板庫，對熱連軋系統采集文本數據進行格式化，并發送到數據持久層模塊。

3.如權利要求1所述的熱連軋數據主題定制系統，其特征在于，主題定制模塊包括：

主題庫查詢單元，用于根據關鍵字查詢主題庫，確定主題庫是否存在用戶所需主題項；

經驗庫推薦單元，用于當主題庫中不存在所需主題項時，提供數據表的數據字典的屬性選擇，并將用戶所選屬性作為所需主題項屬性，并基于用戶所選屬性在經驗庫中獲取推薦主題項；

主題庫注冊單元，用于當所述推薦主題項中存在所需主題項時，將所需主題項注冊入主題庫；當所述推薦主題項中不存在所需主題項時，接受用戶自定義的新主題項，并將所述新主題項注冊入主題庫；

通信單元，在操作數據時，用于向云數據倉庫發送主題項的數據請求。

4.一種基于云計算的熱連軋數據主題定制方法，其特征在于，該定制方法包括以下步驟：

步驟一、ETL模塊對熱連軋系統數據結構進行解析，生成數據字典文件和表頭文件，將數據字典文件和表頭文件發送至數據持久層模塊，并定時對熱連軋系統采集文本數據進行格式化；

步驟二，數據持久層模塊根據接收的數據字典文件和表頭文件，為云數據倉庫創建數據字典和數據表，并定時歸并ETL模塊格式化后的采集文本數據；

步驟三，主題定制模塊基于云數據倉庫進行主題定制。

5.一種如權利要求4所述的熱連軋數據主題定制方法，其特征在于，步驟一具體包括以下步驟：

步驟1.1，ETL模塊解析熱連軋系統數據結構生成數據字典文件和表頭文件；

步驟1.2，ETL模塊對表頭文件進行格式化生成結構化模板庫的模版文件；

步驟1.3，ETL模塊將結構化模板庫里的模版文件定時加載入數據解析模板庫，對熱連軋系統采集文本數據進行格式化，并發送到數據持久層模塊。

6.一種如權利要求4所述的熱連軋數據主題定制方法，其特征在于，步驟三具體包括以下步驟：

步驟3.1，主題定制模塊根據關鍵字查詢主題庫，確定主題庫是否存在用戶所需的主題項；

步驟3.2，當主題庫中不存在所需主題項時，主題定制模塊提供數據表的數據字典的屬性選擇，接收用戶對數據字典中的屬性選擇，并基于用戶所選屬性在經驗庫中獲取推薦主題項；

步驟3.3，當經驗庫推薦主題項中存在所需主題項時，將所需主題項注冊入主題庫；當經驗庫推薦主題項中不存在所需主題項時，經驗庫接受用戶自定義的新主題項，并將所述新主題項注冊入主題庫；

步驟3.4，操作數據時，主題庫向云數據倉庫發送主題項的數據請求。

7.一種如權利要求6所述的熱連軋數據主題定制方法，其特征在于，步驟3.3中用戶自定義新主題項的方式為：從經驗庫推薦主題項中獲得最大匹配主題項，修改最大匹配主題項的屬性，形成新主題項。