[發明專利]一種分布式數據存儲方法及裝置

有效

• 申請號: 201711298223.0
• 申請日: 2017-12-08
• 公開（公告）號: CN108052284B
• 公開（公告）日: 2020-11-06
• 發明（設計）人: 高敦橋;宋昭
• 申請（專利權）人: 北京奇虎科技有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 深圳市世紀恒程知識產權代理事務所 44287
• 代理人: 胡海國

1.一種分布式數據存儲方法，包括：

接收到對數據對象進行存儲的存儲指令時，調起預設虛擬存儲區；

接收所述數據對象被劃分后的數據塊，并將所述數據塊存儲至所述虛擬存儲區中，其中，將接收到的各數據塊存儲至所述虛擬存儲區，并將各所述數據塊的元信息保存至redis中，基于各所述數據塊的元信息對所述虛擬存儲區接收的各所述數據塊進行位置調整，或基于各所述數據塊在數據對象中的位置次序，在虛擬存儲區中以存儲地址遞增的順序為各所述數據塊分配獨立的虛擬子存儲區，當所述虛擬存儲區接收到所述數據塊時，基于所述虛擬存儲區接收的數據塊在所述數據對象中的位置，將所述虛擬存儲區接收的數據塊存儲至對應的虛擬子存儲區；

當所述數據對象的全部數據塊在所述虛擬存儲區中存儲后，獲取存儲在所述虛擬存儲區中的各數據塊的元信息；

將獲取的元信息進行整合得到所述數據對象的索引信息，并利用所述數據對象的索引信息替換所述虛擬存儲區的索引信息，以完成所述數據對象的存儲操作。

2.根據權利要求1所述的方法，其中，所述在接收到對數據對象進行存儲的存儲指令之前，還包括：

建立虛擬存儲區，并將所述虛擬存儲區對應的索引信息保存至索引數據庫中，所述虛擬存儲區由對所述數據對象進行存儲的存儲指令觸發調用。

3.根據權利要求1或2所述的方法，其中，所述接收所述數據對象被劃分后的數據塊，并將所述數據塊存儲至所述虛擬存儲區中，包括：

利用不同服務器分別接收所述數據對象被劃分后各數據塊，并將接收的數據塊存儲至所述虛擬存儲區中，其中，所述不同服務器由服務器集群根據負載均衡原理為準備上傳的各數據塊分配。

4.根據權利要求1或2所述的方法，其中，所述接收所述數據對象被劃分后的數據塊，并將所述數據塊存儲至所述虛擬存儲區中，包括：

依據被劃分后的各數據塊在所述數據對象中的位置次序，在所述虛擬存儲區中以存儲地址遞增的順序為各數據塊分配獨立的虛擬子存儲區；

在接收到數據塊時，分析所述數據塊在所述數據對象中的位置，并將所述數據塊存儲至與其對應的虛擬子存儲區中，直到將所述數據對象的全部數據塊分別存儲至各自對應的虛擬子存儲區中。

5.根據權利要求1或2所述的方法，其中，所述接收所述數據對象被劃分后的數據塊，并將所述數據塊存儲至所述虛擬存儲區中，包括：

在接收到所述數據對象的任一數據塊時，將該數據塊存儲至所述虛擬存儲區中，直到將所述數據對象的全部數據塊都存儲至虛擬存儲區中；

獲取所述任一數據塊對應的元信息，并將獲取的元信息保存至索引數據庫中。

6.根據權利要求5所述的方法，其中，當所述數據對象的全部數據塊都存儲至虛擬存儲區中之后，還包括：

依據各數據塊的元信息，對所述虛擬存儲區中各數據塊的位置順序進行調整，以使所述虛擬存儲區中各數據塊的位置順序對應于各數據塊在所述數據對象中的位置次序。

7.根據權利要求1或2所述的方法，其中，所述將獲取的元信息進行整合得到所述數據對象的索引信息，包括：

將獲取的元信息依據各數據塊之間的關系進行整合，以得到所述數據對象的索引信息。

8.根據權利要求7所述的方法，其中，所述將獲取的元信息依據各數據塊之間的關系進行整合，以得到所述數據對象的索引信息，包括：

根據獲取的元信息確定各數據塊在所述數據對象中的位置次序；

依據各數據塊在所述數據對象中的位置次序，將各數據塊對應的元信息進行組合，利用組合后的元信息作為所述數據對象的索引信息。