[發明專利]非關系型數據庫的控制方法及裝置

有效

• 申請號: 201710258351.6
• 申請日: 2017-04-19
• 公開（公告）號: CN107122435B
• 公開（公告）日: 2021-02-12
• 發明（設計）人: 樊哲
• 申請（專利權）人: 北京奇藝世紀科技有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/245
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 蘇培華

本發明提供了一種非關系型數據庫的控制方法及裝置，其中的方法包括：按照業務類型，將業務數據存儲在該業務類型對應的數據表內，并將所述數據表內的預先選定的數據確定為延遲加載數據；在實際使用所述延遲加載數據時，判斷所述延遲加載數據是否已從所述非關系型數據庫讀取過；如果沒有讀取過，則從所述非關系型數據庫中讀取所述數據，并將讀取的所述數據加入到已讀取數據集合中；如果讀取過，從保存的已讀取數據集合中獲取所述延遲加載數據。本發明可減少客戶端的資源開銷以及網絡傳輸的開銷，減少對數據無謂的加載。

技術領域

本發明涉及計算機及互聯網技術領域，特別是涉及一種非關系型數據庫的控制方法及裝置。

背景技術

隨著互聯網時代的到來，社交網絡、微博、位置服務等面向普通互聯網用戶的交互網站正蓬勃興起，各種網站向數以億計的用戶提供基于互聯網和無線網絡的交互服務。遍布全世界的互聯網用戶每天都進行多種多樣的交互，隨時都在制造各種個樣的數據，這些數據的數量是單機時代數據量的數倍。

面對數據的持續增長，關系型數據庫在很多方面已經無法滿足系統需求，例如，關系型數據庫在高并發讀寫、海量數據高效讀寫、高可用性以及高擴展性等方面有所欠缺。而非關系型數據庫，例如NoSQL、Mongodb、Hbase等，可以達到上述方面的要求，但是又欠缺對數據一致性的能力。

目前互聯網網站系統面對數據不斷增長、并發持續增高的情況，使用非關系型數據庫勢在必行，但同時又需要數據的強一致性。在各個非關系型數據庫中，NoSQL對一致性的支持很有限，Mongodb在同一個collection(關系型數據庫的表)中的操作是原子性的，Hbase則是只提供行級服務。因此，在使用非關系型數據庫時，需要把需求事務的數據存儲在一個表中，作為一個整體單位。當這個單位很大、層級很多時，每次操作不一定需要處理全部數據，可能只需要讀寫部分層級。那么，此時將整體表結構全部讀寫，將耗費不必要的系統開銷、網絡傳輸等資源。

發明內容

為了減少客戶端的資源開銷、網絡傳輸的開銷以及減少對數據無謂的加載，本發明實施例提供一種非關系型數據庫的控制方法及裝置。

根據本發明的一個方面，提供一種非關系型數據庫的控制方法，包括：按照業務類型，將業務數據存儲在該業務類型對應的數據表內，并將所述數據表內的預先選定的數據確定為延遲加載數據；在實際使用所述延遲加載數據時，判斷所述延遲加載數據是否已從所述非關系型數據庫讀取過；如果沒有讀取過，則從所述非關系型數據庫中讀取所述數據，并將讀取的所述數據加入到已讀取數據集合中；如果讀取過，從保存的已讀取數據集合中獲取所述延遲加載數據。

優選的，所述預先選定的數據包括數據長度超過字段閾值的大字段數據；所述方法還包括：在首次讀取而非實際使用所述大字段數據時，直接忽略不做讀取操作。

優選的，所述預先選定的數據包括多級數據，所述多級數據是指以樹形結構存儲的數據；所述方法還包括：分層級獲取多級數據，每次僅獲取一級數據。

優選的，所述多級數據包括父級數據和子級數據；所述分層級獲取多級數據，每次僅獲取一級數據，包括：首次獲取多級數據時，僅從所述非關系型數據庫獲取父級數據，忽略子級數據，并將所述父級數據加入到所述已讀取數據集合中；當需要使用所述子級數據時，判斷是否已從所述非關系型數據庫讀取過所述子級數據，如果讀取過，則從所述已讀取數據集合中獲取所述子級數據；如果沒有讀取過，則從所述非關系型數據庫讀取所述子級數據，并將所述子級數據加入到所述已讀取數據集合中。

優選的，還包括：對于所述延遲加載數據，設置已讀取標志，用于表明是否已從所述非關系型數據庫中讀取過；通過是否具有所述已讀取標志，判斷是否已從所述非關系型數據庫讀取過所述延遲加載數據。

優選的，還包括：在向已讀取數據集合存儲數據時，僅保存具有所述已讀取標志的數據，和/或，根據新增數據請求增加數據，和/或，根據刪除數據請求刪除數據。