[發(fā)明專利]文旅資源采集方法和系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202111021050.4
• 申請日: 2021-09-01
• 公開（公告）號: CN113626513A
• 公開（公告）日: 2021-11-09
• 發(fā)明（設計）人: 趙進平;陳海江
• 申請（專利權）人: 浙江力石科技股份有限公司
• 主分類號: G06F16/25
• 分類號: G06F16/25;G06F16/22;G06F16/215;G06F16/28
• 代理公司: 南京普睿益思知識產(chǎn)權代理事務所(普通合伙) 32475
• 代理人: 曹花

1.一種文旅資源采集方法，其特征在于，包括以下步驟：

數(shù)據(jù)采集，采集程序進行數(shù)據(jù)的采集將原始數(shù)據(jù)保存入庫；

數(shù)據(jù)抽取，抽取程序進行數(shù)據(jù)的聚合和分析，將原始數(shù)據(jù)經(jīng)過抽取轉化成業(yè)務需要的數(shù)據(jù)，并保存至中間臨時數(shù)據(jù)表；

數(shù)據(jù)交換，交換程序將抽取完成的業(yè)務數(shù)據(jù)交換至業(yè)務數(shù)據(jù)庫，供業(yè)務系統(tǒng)使用；

其中，所述數(shù)據(jù)采集、所述數(shù)據(jù)抽取和所述數(shù)據(jù)交換的過程中均進行實時控制和監(jiān)控，出現(xiàn)異常時可以實時預警。

2.根據(jù)權利要求1所述的文旅資源采集方法，其特征在于，

所述采集程序通過字段映射配置和任務調度的方法，將接口對接的數(shù)據(jù)全量存儲入庫。

3.根據(jù)權利要求2所述的文旅資源采集方法，其特征在于，

所述數(shù)據(jù)采集，包括以下步驟：

第一步，建立符合采集數(shù)據(jù)標準的規(guī)約庫；

第二步，配置采集字段和規(guī)約庫的表字段的映射關系；

第三步，配置數(shù)據(jù)采集的接口請求參數(shù)和采集頻率；

第四步，配置數(shù)據(jù)采集程序預警規(guī)則；

第五步，啟用采集程序。

4.根據(jù)權利要求1所述的文旅資源采集方法，其特征在于，

所述抽取程序根據(jù)文旅業(yè)務數(shù)據(jù)使用要求，將采集的全量數(shù)據(jù)聚合分析成有價值的業(yè)務數(shù)據(jù)并存儲在中間臨時數(shù)據(jù)表中。

5.根據(jù)權利要求4所述的文旅資源采集方法，其特征在于，

所述數(shù)據(jù)抽取，包括以下步驟：

第一步，建立符合抽取標準的規(guī)約表；

第二步，配置抽取規(guī)則，即源數(shù)據(jù)字段聚合及計算規(guī)則；

第三步，將第二步結果映射至抽取表數(shù)據(jù)字段；

第四步，配置數(shù)據(jù)抽取程序預警規(guī)則；

第五步，啟用抽取程序。

6.根據(jù)權利要求1所述的文旅資源采集方法，其特征在于，

所述交換程序根據(jù)文旅業(yè)務數(shù)據(jù)要求，將抽取的結果數(shù)據(jù)轉換至文旅業(yè)務數(shù)據(jù)庫。

7.根據(jù)權利要求6所述的文旅資源采集方法，其特征在于，

所述數(shù)據(jù)交換，包括以下步驟：

第一步，配置抽取程序規(guī)約庫連接；

第二步，配置文旅業(yè)務數(shù)據(jù)庫連接；

第三步，配置抽取程序規(guī)約庫數(shù)據(jù)表和文旅業(yè)務數(shù)據(jù)庫數(shù)據(jù)表的映射關系；

第四步，選擇映射關系創(chuàng)建交換任務；

第五步，配置數(shù)據(jù)交換預警規(guī)則；

第六步，配置交換任務執(zhí)行頻率并啟用任務。

8.一種文旅資源采集系統(tǒng)，其特征在于，包括：采集程序、抽取程序和交換程序；

所述采集程序進行數(shù)據(jù)的采集將原始數(shù)據(jù)保存入庫；

所述抽取程序進行數(shù)據(jù)的聚合和分析，將原始數(shù)據(jù)經(jīng)過抽取轉化成業(yè)務需要的數(shù)據(jù)，并保存至中間臨時數(shù)據(jù)表；

所述交換程序將抽取完成的業(yè)務數(shù)據(jù)交換至業(yè)務數(shù)據(jù)庫，供業(yè)務系統(tǒng)使用；

其中，所述采集程序、所述抽取程序和所述交換程序局均設有實時控制和監(jiān)控程序，進行實時控制和監(jiān)控，出現(xiàn)異常時可以實時預警。

9.根據(jù)權利要求8所述的文旅資源采集系統(tǒng)，其特征在于，

所述采集程序通過字段映射配置和任務調度的方法，將接口對接的數(shù)據(jù)全量存儲入庫。

10.根據(jù)權利要求8所述的文旅資源采集系統(tǒng)，其特征在于，

所述抽取程序根據(jù)文旅業(yè)務數(shù)據(jù)使用要求，將采集的全量數(shù)據(jù)聚合分析成有價值的業(yè)務數(shù)據(jù)并存儲在中間表中；

所述交換程序根據(jù)文旅業(yè)務數(shù)據(jù)要求，將抽取的結果數(shù)據(jù)轉換至文旅業(yè)務數(shù)據(jù)庫。