[發(fā)明專利]一種數(shù)據(jù)表的生成方法、裝置及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010566293.5
• 申請(qǐng)日: 2020-06-19
• 公開(kāi)（公告）號(hào): CN111814445A
• 公開(kāi)（公告）日: 2020-10-23
• 發(fā)明（設(shè)計(jì)）人: 管磊;王萌;姚均霖;陳燕
• 申請(qǐng)（專利權(quán)）人: 第四范式（北京）技術(shù)有限公司
• 主分類號(hào): G06F40/183
• 分類號(hào): G06F40/183;G06F8/71;G06N20/00
• 代理公司: 北京博雅睿泉專利代理事務(wù)所(特殊普通合伙) 11442
• 代理人: 吳秀娥

1.一種數(shù)據(jù)表的生成方法，包括：

獲取配置信息，其中，所述配置信息包括用于描述待生成的數(shù)據(jù)表中每列數(shù)據(jù)對(duì)象所代表的字段、及每一所述字段對(duì)應(yīng)的數(shù)據(jù)對(duì)象的限定條件的信息；

根據(jù)所述配置信息生成數(shù)據(jù)表，其中，所述數(shù)據(jù)表中每一數(shù)據(jù)對(duì)象均滿足對(duì)應(yīng)的限定條件。

2.根據(jù)權(quán)利要求1所述的方法，所述獲取配置信息包括：

提供配置信息的配置界面；

通過(guò)所述配置界面獲取所述配置信息。

3.根據(jù)權(quán)利要求1所述的方法，所述獲取配置信息包括：

提供用于上傳配置文件的入口；

通過(guò)所述入口獲取用戶上傳的配置文件；

解析所述配置文件，得到所述配置信息。

4.根據(jù)權(quán)利要求3所述的方法，還包括：

檢測(cè)所述配置文件是否合法；

在所述配置文件合法的情況下，執(zhí)行所述解析所述配置文件，得到所述配置信息的步驟；

在所述配置文件非法的情況下，生成錯(cuò)誤日志。

5.根據(jù)權(quán)利要求3所述的方法，所述配置文件的格式為xlsx、csv、tsv、parquet中的任意一種。

6.根據(jù)權(quán)利要求1所述的方法，還包括：

在界面中提供用于創(chuàng)建數(shù)據(jù)處理流程圖的畫(huà)布區(qū)域；

所述獲取配置信息包括：

響應(yīng)于用戶選擇目標(biāo)數(shù)據(jù)源的操作，將用戶選擇的所述目標(biāo)數(shù)據(jù)源展示在所述畫(huà)布區(qū)域；其中，所述目標(biāo)數(shù)據(jù)源中包含所述配置信息；

所述根據(jù)所述配置信息生成數(shù)據(jù)表包括：

響應(yīng)于用戶選擇目標(biāo)算子的操作，將用戶選擇的所述目標(biāo)算子展示在所述畫(huà)布區(qū)域；其中，所述目標(biāo)算子用于根據(jù)輸入的信息生成數(shù)據(jù)表；

將所述畫(huà)布區(qū)域中的所述目標(biāo)數(shù)據(jù)源和所述目標(biāo)算子進(jìn)行連接，構(gòu)建數(shù)據(jù)處理流程圖；

運(yùn)行所述數(shù)據(jù)處理流程圖，得到所述數(shù)據(jù)表。

7.根據(jù)權(quán)利要求1所述的方法，所述配置信息還包括數(shù)據(jù)表的總行數(shù)、和用于并行生成所述數(shù)據(jù)表的執(zhí)行單元的第一數(shù)量，

所述根據(jù)所述配置信息生成數(shù)據(jù)表包括：

根據(jù)所述總行數(shù)和并行生成所述數(shù)據(jù)表的執(zhí)行單元的第一數(shù)量，確定每一執(zhí)行單元所生成的數(shù)據(jù)對(duì)象的行數(shù)，作為第二數(shù)量；

控制每一執(zhí)行單元生成對(duì)應(yīng)的第二數(shù)量行數(shù)據(jù)對(duì)象；

根據(jù)每一執(zhí)行單元所生成的數(shù)據(jù)對(duì)象，得到所述數(shù)據(jù)表。

8.一種數(shù)據(jù)表的生成裝置，包括：

信息獲取模塊，用于獲取配置信息，其中，所述配置信息包括用于描述待生成的數(shù)據(jù)表中每列數(shù)據(jù)對(duì)象所代表的字段、及每一所述字段對(duì)應(yīng)的數(shù)據(jù)對(duì)象的限定條件的信息；

數(shù)據(jù)表生成模塊，用于根據(jù)所述配置信息生成數(shù)據(jù)表，其中，所述數(shù)據(jù)表中每一數(shù)據(jù)對(duì)象均滿足對(duì)應(yīng)的限定條件。

9.一種包括至少一個(gè)計(jì)算裝置和至少一個(gè)存儲(chǔ)裝置的系統(tǒng)，其中，所述至少一個(gè)存儲(chǔ)裝置用于存儲(chǔ)指令，所述指令用于控制所述至少一個(gè)計(jì)算裝置執(zhí)行根據(jù)權(quán)利要求1至7中任一項(xiàng)所述的方法。

10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序在被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至7中任一項(xiàng)所述的方法。