[發明專利]統一地執行特征抽取的方法及系統

在審

• 申請號: 202010795856.8
• 申請日: 2018-08-21
• 公開（公告）號: CN111949349A
• 公開（公告）日: 2020-11-17
• 發明（設計）人: 黃亞建;王太澤;鄧龍;范曉亮;劉晨璐;劉永超;孫迪
• 申請（專利權）人: 第四范式（北京）技術有限公司
• 主分類號: G06F9/451
• 分類號: G06F9/451
• 代理公司: 北京銘碩知識產權代理有限公司 11286
• 代理人: 蘇銀虹;徐璐璐

1.一種統一地執行特征抽取的方法，其中，所述方法包括：

獲取用于定義與特征抽取相關的處理邏輯的特征抽取腳本；

解析所述特征抽取腳本，以生成用于進行特征抽取的執行計劃；以及

基于特征抽取場景，通過本機或集群執行生成的執行計劃。

2.根據權利要求1所述的方法，其中，基于特征抽取場景通過本機或集群執行生成的執行計劃的步驟包括：

當特征抽取場景為在線特征抽取場景時，通過本機以單機模式執行生成的執行計劃；以及

當特征抽取場景為離線特征抽取場景時，通過集群以分布式模式執行生成的執行計劃。

3.根據權利要求1所述的方法，其中，解析所述特征抽取腳本以生成用于進行特征抽取的執行計劃的步驟包括：

按處理順序分割所述特征抽取腳本所定義的處理邏輯，來生成用于進行特征抽取的執行計劃。

4.根據權利要求3所述的方法，其中，所述處理邏輯涉及在至少一個時間窗口下進行特征抽取，并且，

按處理順序分割所述特征抽取腳本所定義的處理邏輯來生成用于進行特征抽取的執行計劃的步驟包括：針對各個時間窗口，分別按處理順序分割相應的處理邏輯來生成用于進行特征抽取的執行計劃。

5.根據權利要求4所述的方法，其中，所述執行計劃是由節點構成的有向無環圖，其中，所述節點與分割后的處理邏輯對應，

并且，基于特征抽取場景通過本機或集群執行生成的執行計劃的步驟包括：基于特征抽取場景，通過本機或集群實現與各個節點對應的處理邏輯來執行生成的執行計劃。

6.根據權利要求5所述的方法，其中，所述節點包括與用于從數據表獲取特征的處理邏輯對應的計算節點。

7.根據權利要求6所述的方法，其中，所述節點還包括與用于進行數據表拼接的處理邏輯對應的拼表節點和/或與用于進行特征匯總的處理邏輯對應的特征拼接節點。

8.一種統一地執行特征抽取的系統，其中，所述系統包括：

腳本獲取裝置，獲取用于定義與特征抽取相關的處理邏輯的特征抽取腳本；

計劃生成裝置，解析所述特征抽取腳本，以生成用于進行特征抽取的執行計劃；以及

計劃執行裝置，基于特征抽取場景，通過本機或集群執行生成的執行計劃。

9.一種包括至少一個計算裝置和至少一個存儲指令的存儲裝置的系統，其中，所述指令在被所述至少一個計算裝置運行時，促使所述至少一個計算裝置執行如權利要求1到7中的任一權利要求所述的統一地執行特征抽取的方法。

10.一種存儲指令的計算機可讀存儲介質，其中，當所述指令被至少一個計算裝置運行時，促使所述至少一個計算裝置執行如權利要求1到7中的任一權利要求所述的統一地執行特征抽取的方法。