[發明專利]一種可視化腳本編輯方法與裝置在審
| 申請號: | 201811570259.4 | 申請日: | 2018-12-21 |
| 公開(公告)號: | CN109710231A | 公開(公告)日: | 2019-05-03 |
| 發明(設計)人: | 遲俊青;王純斌;張奇;鐘武 | 申請(專利權)人: | 成都四方偉業軟件股份有限公司 |
| 主分類號: | G06F8/30 | 分類號: | G06F8/30 |
| 代理公司: | 北京超凡志成知識產權代理事務所(普通合伙) 11371 | 代理人: | 鄧超 |
| 地址: | 610000 四川省*** | 國省代碼: | 四川;51 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據處理指令 腳本編輯 可視化 腳本語言 流式處理 目標腳本 目標流 引擎 腳本文件 開發效率 人員操作 選擇指令 引擎生成 引擎選擇 大數據 預存儲 語言 | ||
本發明提供了一種可視化腳本編輯方法與裝置,涉及大數據分布式流式處理技術領域。通過接收一數據處理指令,再依據數據處理指令顯示預存儲的多個腳本語言與流引擎,然后依據一選擇指令從多個腳本語言與流引擎選擇目標腳本語言與目標流引擎,最后依據數據處理指令、目標腳本語言以及目標流引擎生成流計算腳本文件。本發明提供的可視化腳本編輯方法與裝置具有方便技術人員操作,提高了流式處理開發效率的優點。
技術領域
本發明涉及大數據分布式流式處理技術領域,具體而言,涉及一種可視化腳本編輯方法與裝置。
背景技術
分布式流處理是對無邊界數據集進行連續不斷的處理、聚合和分析的過程,與MapReduce類似是一種通用計算框架,期望延遲在毫秒或秒級別。這類系統一般采用有向無環圖(DAG)。DAG是任務鏈的圖形化表示,用它來描述流處理作業的拓撲,目前比較主流的流式處理引擎Spark、Storm、Flink。
流式數據處理邏輯及流引擎需要根據實際業務需求結合才可發揮各類流引擎的自身價值。然而,在實際的業務場景中,由于技術人員的技術偏好不同,可能導致流處理開發效率較低。
有鑒于此,如何解決上述問題,是本領域技術人員關注的重點。
發明內容
有鑒于此,本發明的目的在于提供一種可視化腳本編輯方法,以解決現有技術中由于技術人員的技術偏好不同,導致流處理開發效率較低的問題。
本發明的另一目的在于提供一種可視化腳本編輯裝置,以解決現有技術中由于技術人員的技術偏好不同,導致流處理開發效率較低的問題。
為了實現上述目的,本發明實施例采用的技術方案如下:
一方面,本發明實施例提供了一種可視化腳本編輯方法,所述可視化腳本編輯方法包括:
接收一數據處理指令;
依據所述數據處理指令顯示預存儲的多個腳本語言與流引擎;
依據一選擇指令從所述多個腳本語言與流引擎選擇目標腳本語言與目標流引擎;
依據所述數據處理指令、所述目標腳本語言以及所述目標流引擎生成流計算腳本文件。
另一方面,本發明實施例還提供了一種可視化腳本編輯裝置,所述可視化腳本編輯裝置包括:
信息接收單元,用于接收一數據處理指令;
顯示單元,用于依據所述數據處理指令顯示預存儲的多個腳本語言與流引擎;
選擇單元,用于依據一選擇指令從所述多個腳本語言與流引擎選擇目標腳本語言與目標流引擎;
處理單元,用于依據所述數據處理指令、所述目標腳本語言以及所述目標流引擎生成流計算腳本文件。
相對現有技術,本發明具有以下有益效果:
本發明提供了一種可視化腳本編輯方法與裝置,通過接收一數據處理指令,再依據數據處理指令顯示預存儲的多個腳本語言與流引擎,然后依據一選擇指令從多個腳本語言與流引擎選擇目標腳本語言與目標流引擎,最后依據數據處理指令、目標腳本語言以及目標流引擎生成流計算腳本文件。由于本發明提供的可視化腳本編輯方法與裝置能夠實現技術人員根據自己的技術偏好選用不同的腳本語言與流引擎,從而生成更適合技術人員需求的流引擎腳本,方便技術人員操作,提高了流式處理開發效率。同時,由于技術人員僅需要根據自己的喜好選擇出腳本與流引擎,系統即自動生成流計算腳本文件,因此對于技術人員而言,其操作簡單且易上手。
為使本發明的上述目的、特征和優點能更明顯易懂,下文特舉較佳實施例,并配合所附附圖,作詳細說明如下。
附圖說明
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于成都四方偉業軟件股份有限公司,未經成都四方偉業軟件股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201811570259.4/2.html,轉載請聲明來源鉆瓜專利網。





