[發明專利]基于DSL的數據映射方法及裝置、電子設備、存儲介質在審
| 申請號: | 201811339286.0 | 申請日: | 2018-11-12 |
| 公開(公告)號: | CN109522319A | 公開(公告)日: | 2019-03-26 |
| 發明(設計)人: | 李培義;何威 | 申請(專利權)人: | 北京懿醫云科技有限公司 |
| 主分類號: | G06F16/242 | 分類號: | G06F16/242 |
| 代理公司: | 北京律智知識產權代理有限公司 11438 | 代理人: | 袁禮君;闞梓瑄 |
| 地址: | 100195 北京市海淀區*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據映射 電子設備 指令頁面 語句 計算機可讀存儲介質 數據處理技術 指令 數據庫語言 存儲介質 規則解析 結構描述 應用需求 映射 工程師 應用 | ||
1.一種基于DSL的數據映射方法,其特征在于,包括:
獲取一個或多個原始數據表;
提供DSL指令頁面,通過所述DSL指令頁面接收針對于所述原始數據表的數據映射指令;
根據結構描述規則解析所述數據映射指令,并生成基于數據庫語言的數據映射語句;
根據所述數據映射語句將所述原始數據表映射為應用數據表。
2.根據權利要求1所述的方法,其特征在于,所述數據映射指令包括以下語法中的至少一種:
Join,用于將所述原始數據表中的字段進行關聯;
Filter,用于過濾所述原始數據表中的數據;
Mapping,用于指定所述原始數據表中的字段到所述應用數據表中的字段的映射關系;
Group,用于將所述應用數據表中的字段進行匯總。
3.根據權利要求2所述的方法,其特征在于,所述數據庫語言包括SparkSQL;所述根據結構描述規則解析所述數據映射指令,并生成基于數據庫語言的數據映射語句包括:
將所述數據映射指令中包含Join語法的指令轉換為SparkSQL的FROM子句;
將所述數據映射指令中包含Filter語法的指令轉換為SparkSQL的WHERE子句;
將所述數據映射指令中包含Mapping語法的指令轉換為SparkSQL的SELECT子句;
將所述數據映射指令中包含Group語法的指令轉換為SparkSQL的GROUP BY子句;
在已轉換的子句的頭部添加SparkSQL的INSERT子句,并將全部子句合并為所述數據映射語句。
4.根據權利要求1所述的方法,其特征在于,還包括:
在提供所述DSL指令頁面后,在所述DSL指令頁面內呈現一函數編輯控件;
根據所述函數編輯控件接收到的函數編輯指令生成自定義函數。
5.根據權利要求4所述的方法,其特征在于,所述自定義函數包括數組聚合函數、結構體聚合函數。
6.根據權利要求4所述的方法,其特征在于,還包括:
將所述自定義函數添加到所述結構描述規則中。
7.根據權利要求1所述的方法,其特征在于,提供DSL指令頁面,通過所述DSL指令頁面接收針對于所述原始數據表的數據映射指令包括:
提供所述DSL指令頁面,并在所述DSL指令頁面內呈現樣本數據表及樣本映射指令;
接收針對于所述樣本映射指令的修改操作,同時呈現修改后的所述樣本數據表;
根據所述樣本映射指令及針對于所述樣本映射指令的修改操作,生成所述數據映射指令。
8.一種基于DSL的數據映射裝置,其特征在于,包括:
數據獲取模塊,用于獲取一個或多個原始數據表;
指令接收模塊,用于提供DSL指令頁面,通過所述DSL指令頁面接收針對于所述原始數據表的數據映射指令;
語句轉換模塊,用于根據指令轉換規則解析所述數據映射指令,并生成基于數據庫語言的數據映射語句;
目標映射模塊,用于根據所述數據映射語句將所述原始數據表映射為應用數據表。
9.一種電子設備,其特征在于,包括:
處理器;以及
存儲器,用于存儲所述處理器的可執行指令;
其中,所述處理器配置為經由執行所述可執行指令來執行權利要求1-7任一項所述的方法。
10.一種計算機可讀存儲介質,其上存儲有計算機程序,其特征在于,所述計算機程序被處理器執行時實現權利要求1-7任一項所述的方法。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京懿醫云科技有限公司,未經北京懿醫云科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201811339286.0/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種數據質量管理方法及系統
- 下一篇:一種服務于數據庫同態加密的優化方法





