[發明專利]一種基于數據處理服務實現大數據采集系統腳本功能擴展和定制的方法

在審

• 申請號: 201811235519.2
• 申請日: 2018-10-25
• 公開（公告）號: CN111104154A
• 公開（公告）日: 2020-05-05
• 發明（設計）人: 梁威
• 申請（專利權）人: 長沙博為軟件技術股份有限公司
• 主分類號: G06F8/71
• 分類號: G06F8/71
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發明提出一種基于數據處理服務實現大數據采集系統腳本功能擴展和定制的方法，使用戶能夠通過Javascript腳本語言調用這些功能，并在這些功能基礎上擴展和定制各種應用的需求，其特征在于通過數據處理通用工具高級語言擴展腳本處理能力，實現大數據采集后的數據清洗、轉換等應用領域的個性化需求，包括高級功能模塊、高級功能接口模塊、腳本邏輯模塊、腳本引擎處理模塊，高級功能模塊采用C^#高級語言，實現更高級功能，高級功能接口植入腳本引擎，負責javascript語言與C^#語言交互處理，讓腳本配置模塊實現更高級功能。

技術領域

本發明屬于大數據采集的清洗、轉換、存儲等技術領域，具體涉及一種基于數據處理服務實現大數據采集系統腳本功能擴展和定制的方法。

背景技術

二十一世紀的今天，現代信息化建設已達到一定程度，各個行業領域已經積累了大量數據，如何讓龐大數據產生價值是我們都在考慮的問題，因而對于數據分析就有了更迫切需求，如何解決數據進行快速采集和數據融合處理成為實現數據分析的必經之路。

雖然使用腳本實現大數據采集應用系統上的需求彌補了軟件平臺在應用上的局限與不足，腳本一般來說編輯簡單，修改方便，不需編譯即可執行，簡化了開發周期，保證了系統的連續運行。但傳統的數據處理中，有一類情況是使用高級語言開發接口實現數據采集和融合處理，雖然能夠滿足數據處理的所有功能需求，但這種模式實施繁瑣、實施周期長，且在實施過程靈活度不夠。另外一種方式采用腳本語言配合腳本引擎的方式作為數據處理的方式可以解決上述問題，但是腳本語言不能支持很多高級功能這個致命弱點，比如圖片處理、文件操作等，因為這種方式不能滿足所有數據處理的功能需求。

發明內容

（一）要解決的技術問題

本發明的主要目的是在大數據采集軟件基礎上，提供一種基于數據處理服務實現大數據采集系統腳本功能擴展和定制的方法，基于高級語言功能注入模塊情況下，當腳本語言配置時將高級功能提供的接口編入數據處理的流程或處理邏輯中，之后將腳本注入到腳本引擎，引擎驅動腳本執行，此時執行到高級語言提供接口時，通過高級功能接口模塊實現腳本與高級語言的交互，旨在通過高級語言功能模塊解決腳本不能實現的功能，如圖片處理、文件操作等。

（二）技術方案

為實現上述目的，本發明提供一種基于數據處理服務實現大數據采集系統腳本功能擴展和定制的方法。

其需要解決的技術問題采用以下技術方案來實現：

S1：將大數據采集系統的實時數據庫封裝為一個實時庫腳本對象，根據數據處理需求，通過開發高級功能模塊處理腳本無法處理的功能，如圖形處理、文件操作、外部接口調用等。

S2：開發高級功能接口模塊，用于提取高級功能對外接口，供腳本引擎與高級功能進行javascript語言與C^#語言交互處理。

S3：開發腳本配置模塊，用于配置數據處理業務邏輯，在邏輯中引用高級功能接口，處理腳本不能處理的功能。

S4：開發腳本引擎模塊，用于執行腳本配置流程，驅動數據邏輯處理，且當執行高級功能接口時，高級功能通過接口處理高級功能邏輯。

與現有技術相比，本發明的有益效果主要在于：旨在通過高級語言功能模塊解決腳本不能實現的功能，通過腳本注入高級功能模塊進行數據處理，如圖片處理、文件操作等。

附圖說明

構成本發明專利的一部分的附圖用來提供對本發明專利的進一步理解，本發明專利的示意性實施例及其說明用于解釋本發明專利，并不構成對本發明專利的不當限定。

圖1為本發明實施例方法的流程示意圖。

具體實施方式