[發明專利]一種數據加載方法及系統

在審

• 申請號: 201811260914.6
• 申請日: 2018-10-26
• 公開（公告）號: CN109656902A
• 公開（公告）日: 2019-04-19
• 發明（設計）人: 徐浩
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: G06F16/21
• 分類號: G06F16/21;G06F16/23;G06F16/27;H04L29/08
• 代理公司: 北京博思佳知識產權代理有限公司 11415
• 代理人: 林祥

公開了一種數據加載方法及系統。一種數據加載方法，該方法包括：數據使用方向數據提供方注冊基本信息；數據提供方記錄基本信息，根據基本信息中包括的所需公共數據對應的標識查詢所需公共數據當前對應的目標版本信息以及云存儲服務方存儲地址，根據基本信息中包括的數據使用方標識將查詢到的目標版本信息以及云存儲服務方存儲地址推送給數據使用方；數據使用方接收數據提供方推送的目標版本信息以及云存儲服務方存儲地址，基于云存儲服務方存儲地址，在云存儲服務方查詢當前目標版本信息的所需公共數據，并加載至本地。

技術領域

本說明書實施例涉及數據存儲技術領域，尤其涉及一種數據加載方法及系統。

背景技術

對于分布式系統，通常由多個系統組成，并且各個系統之間通過網絡互相訪問，例如分布式系統由系統A、系統B、系統C等組成。在分布式系統中，尤其是在大型分布式系統中，經常存在一些被各個系統使用的公共數據，這些公共數據會定期發生更新，并且頻繁地被各個系統查詢并使用，為此在分布式系統中存在一個系統專門負責管理和維護這些公共數據。為了便于描述，后續將使用公共數據的系統稱之為數據使用方，將負責管理和維護這些公共數據的系統稱之為數據提供方。

為了能夠使各個數據使用方方便快捷的使用這些公共數據，目前普遍采用的方式是：基于近端緩存的公共數據管理方式，將公共數據加載到各個數據使用方的本地，即數據使用方向數據提供方發送數據獲取指令，數據提供方基于該數據獲取指令從本地數據庫讀取對應的公共數據返回給數據使用方，數據使用方將該公共數據加載到本地，后續數據使用方即可從本地直接查詢并使用公共數據。

目前的這種數據加載方法，隨著公共數據的數據量級不斷增大，對于數據提供方而言，從本地數據庫讀取公共數據的時間成本會逐步增加，以及向數據使用方傳輸公共數據的時間成本同樣會逐步增加。

發明內容

針對上述技術問題，本說明書實施例提供一種數據加載方法及系統，技術方案如下：

一種數據加載方法，應用于公共數據加載系統，所述系統包括數據使用方、數據提供方以及云存儲服務方，所述數據提供方本地的公共數據同步至所述云存儲服務方，該方法包括：

數據使用方向數據提供方注冊基本信息，所述基本信息中包括數據使用方標識以及數據使用方所需公共數據對應的標識；

數據提供方記錄所述基本信息，根據所述基本信息中包括的所需公共數據對應的標識查詢所需公共數據當前對應的目標版本信息以及云存儲服務方存儲地址，根據所述基本信息中包括的數據使用方標識將查詢到的目標版本信息以及云存儲服務方存儲地址推送給數據使用方；

數據使用方接收數據提供方推送的目標版本信息以及云存儲服務方存儲地址，基于所述云存儲服務方存儲地址，在云存儲服務方查詢當前目標版本信息的所需公共數據，并加載至本地。

一種數據加載方法，應用于數據提供方，該方法包括：

記錄數據使用方注冊的基本信息；

根據所述基本信息中包括的所需公共數據對應的標識查詢所需公共數據當前對應的目標版本信息以及云存儲服務方存儲地址；

根據所述基本信息中包括的數據使用方標識將查詢到的目標版本信息以及云存儲服務方存儲地址推送給數據使用方，以使數據使用方接收數據提供方推送的目標版本信息以及云存儲服務方存儲地址，基于所述云存儲服務方存儲地址，在云存儲服務方查詢當前目標版本信息的所需公共數據，并加載至本地。

一種數據加載方法，應用于數據使用方，該方法包括：