[發(fā)明專(zhuān)利]ETL模塊間父任務(wù)關(guān)系的獲取方法和裝置無(wú)效
| 申請(qǐng)?zhí)枺?/td> | 200910207138.8 | 申請(qǐng)日: | 2009-10-27 |
| 公開(kāi)(公告)號(hào): | CN102053972A | 公開(kāi)(公告)日: | 2011-05-11 |
| 發(fā)明(設(shè)計(jì))人: | 林正華 | 申請(qǐng)(專(zhuān)利權(quán))人: | 阿里巴巴集團(tuán)控股有限公司 |
| 主分類(lèi)號(hào): | G06F17/30 | 分類(lèi)號(hào): | G06F17/30 |
| 代理公司: | 北京鑫媛睿博知識(shí)產(chǎn)權(quán)代理有限公司 11297 | 代理人: | 龔家驊 |
| 地址: | 英屬開(kāi)曼群島大開(kāi)*** | 國(guó)省代碼: | 開(kāi)曼群島;KY |
| 權(quán)利要求書(shū): | 查看更多 | 說(shuō)明書(shū): | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | etl 模塊 任務(wù) 關(guān)系 獲取 方法 裝置 | ||
1.一種ETL模塊間父任務(wù)關(guān)系的獲取方法,其特征在于,包括:
對(duì)各ETL模塊中的關(guān)鍵字進(jìn)行匹配;
根據(jù)所述匹配結(jié)果,獲取各ETL模塊的輸入表和輸出表;
根據(jù)所述各ETL模塊的輸入表和輸出表,獲取所述各ETL模塊間存在的父任務(wù)關(guān)系。
2.如權(quán)利要求1所述的方法,其特征在于,所述對(duì)各ETL模塊中的關(guān)鍵字進(jìn)行匹配包括:
所述各ETL模塊中包括的為結(jié)構(gòu)化查詢(xún)語(yǔ)言SQL語(yǔ)句時(shí),使用lex、yacc和/或antlr工具對(duì)各ETL模塊中SQL語(yǔ)句的關(guān)鍵字進(jìn)行匹配。
3.如權(quán)利要求1或2所述的方法,其特征在于,所述關(guān)鍵字至少包括:insert?into、merge?into、update、from和using中的一種或多種。
4.如權(quán)利要求3所述的方法,其特征在于,所述根據(jù)所述匹配結(jié)果,獲取各ETL模塊的輸入表和輸出表,包括:
對(duì)于一ETL模塊,
匹配到insert?into時(shí),判斷insert?into后的字符串是所述ETL模塊的輸出表;
匹配到merge?into時(shí),判斷merge?into后的字符串是所述ETL模塊的輸出表;
匹配到update時(shí),判斷update后的字符串是所述ETL模塊的輸出表;
匹配到from時(shí),判斷from后的字符串是所述ETL模塊的輸入表;
匹配到using時(shí),判斷using后的字符串是所述ETL模塊的輸入表。
5.如權(quán)利要求3所述的方法,其特征在于,所述根據(jù)所述各ETL模塊的輸入表和輸出表,獲取所述各ETL模塊間存在的父任務(wù)關(guān)系,包括:
對(duì)各ETL模塊的輸入表和輸出表進(jìn)行匹配,當(dāng)?shù)谝籈TL模塊的輸入表為第二ETL模塊的輸出表時(shí),判斷第二ETL模塊為第一ETL模塊的父任務(wù),并對(duì)第一ETL模塊的父任務(wù)進(jìn)行記錄。
6.一種ETL模塊間父任務(wù)關(guān)系的獲取裝置,其特征在于,包括:
關(guān)鍵字匹配單元,用于對(duì)各ETL模塊中的關(guān)鍵字進(jìn)行匹配;
輸入輸出表獲取單元,用于根據(jù)所述關(guān)鍵字匹配單元的關(guān)鍵字匹配結(jié)果,獲取各ETL模塊的輸入表和輸出表;
父任務(wù)關(guān)系獲取單元,用于根據(jù)所述輸入輸出表獲取單元獲取的各ETL模塊的輸入表和輸出表,獲取所述各ETL模塊間存在的父任務(wù)關(guān)系。
7.如權(quán)利要求6所述的裝置,其特征在于,所述關(guān)鍵字匹配單元具體用于:
所述各ETL模塊中包括的為結(jié)構(gòu)化查詢(xún)語(yǔ)言SQL語(yǔ)句時(shí),使用lex、yacc和/或antlr工具對(duì)各ETL模塊中SQL語(yǔ)句的關(guān)鍵字進(jìn)行匹配。
8.如權(quán)利要求6或7所述的裝置,其特征在于,所述關(guān)鍵字匹配單元匹配的關(guān)鍵字至少包括:insert?into、merge?into、update、from和using中的一種或多種。
9.如權(quán)利要求8所述的裝置,其特征在于,所述輸入輸出表獲取單元具體用于:
對(duì)于一ETL模塊,
匹配到insert?into時(shí),判斷insert?into后的字符串是所述ETL模塊的輸出表;
匹配到merge?into時(shí),判斷merge?into后的字符串是所述ETL模塊的輸出表;
匹配到update時(shí),判斷update后的字符串是所述ETL模塊的輸出表;
匹配到from時(shí),判斷from后的字符串是所述ETL模塊的輸入表;
匹配到using時(shí),判斷using后的字符串是所述ETL模塊的輸入表。
10.如權(quán)利要求8所述的裝置,其特征在于,所述父任務(wù)關(guān)系獲取單元具體用于:
對(duì)各ETL模塊的輸入表和輸出表進(jìn)行匹配,當(dāng)?shù)谝籈TL模塊的輸入表為第二ETL模塊的輸出表時(shí),判斷第二ETL模塊為第一ETL模塊的父任務(wù),并對(duì)第一ETL模塊的父任務(wù)進(jìn)行記錄。
該專(zhuān)利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專(zhuān)利權(quán)人授權(quán)。該專(zhuān)利全部權(quán)利屬于阿里巴巴集團(tuán)控股有限公司,未經(jīng)阿里巴巴集團(tuán)控股有限公司許可,擅自商用是侵權(quán)行為。如果您想購(gòu)買(mǎi)此專(zhuān)利、獲得商業(yè)授權(quán)和技術(shù)合作,請(qǐng)聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/200910207138.8/1.html,轉(zhuǎn)載請(qǐng)聲明來(lái)源鉆瓜專(zhuān)利網(wǎng)。
- 同類(lèi)專(zhuān)利
- 專(zhuān)利分類(lèi)
G06F 電數(shù)字?jǐn)?shù)據(jù)處理
G06F17-00 特別適用于特定功能的數(shù)字計(jì)算設(shè)備或數(shù)據(jù)處理設(shè)備或數(shù)據(jù)處理方法
G06F17-10 .復(fù)雜數(shù)學(xué)運(yùn)算的
G06F17-20 .處理自然語(yǔ)言數(shù)據(jù)的
G06F17-30 .信息檢索;及其數(shù)據(jù)庫(kù)結(jié)構(gòu)
G06F17-40 .數(shù)據(jù)的獲取和記錄
G06F17-50 .計(jì)算機(jī)輔助設(shè)計(jì)
- 數(shù)據(jù)抽取、轉(zhuǎn)換和加載的執(zhí)行方法和裝置
- 為ETL任務(wù)分配節(jié)點(diǎn)的方法和調(diào)度系統(tǒng)
- 一種用于調(diào)度ETL任務(wù)的方法與設(shè)備
- 一種基于元數(shù)據(jù)的ETL實(shí)現(xiàn)方法及系統(tǒng)
- 一種監(jiān)控任務(wù)運(yùn)行的方法和設(shè)備
- 一種分布式數(shù)據(jù)ETL處理方法及裝置
- 一種基于多服務(wù)節(jié)點(diǎn)的數(shù)據(jù)處理系統(tǒng)及其方法
- ETL任務(wù)調(diào)度方法、裝置、計(jì)算機(jī)設(shè)備及存儲(chǔ)介質(zhì)
- 一種基于元數(shù)據(jù)的ETL任務(wù)批量生成方法
- ETL文件拆分方法及裝置
- 任務(wù)協(xié)作裝置及方法
- 用于量化任務(wù)價(jià)值的任務(wù)管理方法及裝置
- 用于運(yùn)行任務(wù)的系統(tǒng)、方法和裝置
- 一種分布式任務(wù)調(diào)度系統(tǒng)及方法
- 任務(wù)信息處理方法
- 一種同步任務(wù)異步執(zhí)行的方法和調(diào)度系統(tǒng)
- 數(shù)據(jù)處理方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀介質(zhì)
- 一種自動(dòng)分配和推送的任務(wù)管理平臺(tái)及方法
- 程序執(zhí)行控制的裝置及方法、終端和存儲(chǔ)介質(zhì)
- 基于會(huì)話(huà)的任務(wù)待辦方法、系統(tǒng)、電子設(shè)備及存儲(chǔ)介質(zhì)
- 關(guān)系視圖
- 位置關(guān)系檢測(cè)裝置以及位置關(guān)系檢測(cè)系統(tǒng)
- 關(guān)系建模
- 關(guān)系分析方法、關(guān)系分析程序、以及關(guān)系分析裝置
- 實(shí)體關(guān)系分類(lèi)裝置和實(shí)體關(guān)系分類(lèi)方法
- 用戶(hù)關(guān)系抽取方法和用戶(hù)關(guān)系抽取系統(tǒng)
- 融合依存關(guān)系與篇章修辭關(guān)系的事件時(shí)序關(guān)系識(shí)別方法
- 開(kāi)關(guān)系統(tǒng)
- 視頻視覺(jué)關(guān)系檢測(cè)的關(guān)系片段連接方法
- 開(kāi)關(guān)系統(tǒng)





