[發明專利]基于Key-Value表的非結構化數據存儲方法、裝置及電子設備

在審

• 申請號: 202111586927.4
• 申請日: 2021-12-23
• 公開（公告）號: CN114281922A
• 公開（公告）日: 2022-04-05
• 發明（設計）人: 秦曉宏;黃主斌
• 申請（專利權）人: 上海柯林布瑞信息技術有限公司
• 主分類號: G06F16/31
• 分類號: G06F16/31;G06F16/81
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 趙迎迎

1.一種基于Key-Value表的非結構化數據存儲方法，其特征在于，包括：

獲取至少一個非結構化文件；

解析所述非結構化文件，獲取所述非結構化文件中的節點標識和節點數據；

基于所述非結構化文件中的節點標識和節點數據，將存在對應關系的節點標識和節點數據組合成鍵值對；

基于所述非結構化文件及所述非結構化文件對應的鍵值對，將所述鍵值對中的節點標識和節點數據存儲至第一數據表中。

2.根據權利要求1所述的方法，其特征在于，所述第一數據表中還包括文件標識，所述文件標識與所述非結構化文件相對應，并與所述節點標識和節點數據對應存儲。

3.根據權利要求1所述的方法，其特征在于，解析所述非結構化文件，還包括：獲取所述非結構化文件中的節點名稱，所述節點名稱與所述節點標識相對應，并與所述節點標識對應存儲。

4.根據權利要求3所述的方法，其特征在于，還包括字段詞典，所述字段詞典用于存儲節點名稱和節點標識，所述方法還包括：

將解析所述非結構化文件所獲得的節點標識和節點名稱與所述字段詞典中存儲的所述節點標識和節點名稱相對比；

若不同，則基于解析所述非結構化文件所獲得的節點標識和節點名稱更新所述字段詞典中存儲的所述節點標識和/或節點名稱。

5.根據權利要求2所述的方法，其特征在于，還包括根據所述第一數據表的數據生成第二數據表，生成過程包括：

獲取所述第一數據表中的所有不同節點標識；

基于所述所有不同節點標識生成建表語句；

根據所述建表語句生成所述第二數據表的表結構；

基于所述第一數據表中的文件標識及各節點標識和節點數據的鍵值對，生成所述第二數據表的數據。

6.根據權利要求4所述的方法，其特征在于，還包括根據所述字段詞典的數據生成第二數據表，生成過程包括：

獲取所述字段詞典中的所有不同節點標識；

基于所述所有不同節點標識生成建表語句；

根據所述建表語句生成所述第二數據表的表結構；

基于所述第一數據表中的文件標識及各節點標識和節點數據的鍵值對，生成所述第二數據表的數據。

7.根據權利要求5或6所述的方法，其特征在于，所述第二數據表還包括節點名稱，所述節點名稱位于所述第二數據表的表頭，并與所述節點標識相對應。

8.根據權利要求1～6任一所述的方法，其特征在于，還包括標準化數據映射表，所述解析所述非結構化文件，獲取所述非結構化文件中的節點標識和節點數據后，還包括：將所述節點數據通過所述標準化數據映射表的映射成為標準節點數據，存儲在所述第一數據表和/或第二數據表中，替換相應的節點數據。

9.一種基于Key-Value表的非結構化數據存儲裝置，其特征在于，包括：

文件獲取模塊，用于獲取至少一個非結構化文件；

文件解析模塊，用于解析所述非結構化文件，獲取所述非結構化文件中的節點標識和節點數據；

鍵值對組合模塊，用于基于所述非結構化文件中的節點標識和節點數據，將存在對應關系的節點標識和節點數據組合成鍵值對；

鍵值對存儲模塊，用于基于所述非結構化文件及所述非結構化文件對應的鍵值對，將所述鍵值對中的節點標識和節點數據存儲至第一數據表中。

10.一種電子設備，其特征在于，所述電子設備包括：

一個或多個處理器；

存儲裝置，用于存儲一個或多個程序；

當所述程序被所述處理器執行，使得所述處理器實現如權利要求1-8中任一所述的基于Key-Value表的非結構化數據存儲方法。