[發(fā)明專利]基于binlog的元數(shù)據(jù)管理方法和用于提供元數(shù)據(jù)的方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201410403789.5
• 申請(qǐng)日: 2014-08-15
• 公開(kāi)（公告）號(hào): CN105447014B
• 公開(kāi)（公告）日: 2019-03-15
• 發(fā)明（設(shè)計(jì)）人: 曾文旌
• 申請(qǐng)（專利權(quán)）人: 阿里巴巴集團(tuán)控股有限公司
• 主分類號(hào): G06F16/242
• 分類號(hào): G06F16/242
• 代理公司: 北京清源匯知識(shí)產(chǎn)權(quán)代理事務(wù)所(特殊普通合伙) 11644
• 代理人: 馮德魁

1.一種基于binlog的元數(shù)據(jù)管理方法，其特征在于，包括：

從MySQL主數(shù)據(jù)庫(kù)獲取元數(shù)據(jù)，作為基準(zhǔn)元數(shù)據(jù)；

以上述獲取基準(zhǔn)元數(shù)據(jù)的時(shí)間點(diǎn)為起點(diǎn)，從所述MySQL主數(shù)據(jù)庫(kù)獲取二進(jìn)制日志binlog數(shù)據(jù)；在上述獲取binlog數(shù)據(jù)的過(guò)程中，針對(duì)所述binlog數(shù)據(jù)中的每個(gè)日志事件執(zhí)行下述操作：

判斷所述日志事件記錄的是否為DDL操作；

若是，存儲(chǔ)與所述DDL操作相關(guān)的信息。

2.根據(jù)權(quán)利要求1所述的基于binlog的元數(shù)據(jù)管理方法，其特征在于，與所述DDL操作相關(guān)的信息包括：所述DDL操作對(duì)應(yīng)的DDL語(yǔ)句，以及所述DDL操作在所述binlog數(shù)據(jù)中對(duì)應(yīng)的時(shí)間戳信息。

3.根據(jù)權(quán)利要求2所述的基于binlog的元數(shù)據(jù)管理方法，其特征在于，包括：

壓縮所述基準(zhǔn)元數(shù)據(jù)，并將壓縮后的基準(zhǔn)元數(shù)據(jù)以文件的形式存儲(chǔ)在本地文件系統(tǒng)中。

4.根據(jù)權(quán)利要求3所述的基于binlog的元數(shù)據(jù)管理方法，其特征在于，在執(zhí)行所述壓縮所述基準(zhǔn)元數(shù)據(jù)的步驟前，執(zhí)行下述操作：

將已獲取的基準(zhǔn)元數(shù)據(jù)導(dǎo)入本地MySQL數(shù)據(jù)庫(kù)中；

相應(yīng)的，如果所述判斷所述日志事件記錄的是否為DDL操作的結(jié)果為“是”，則在存儲(chǔ)與所述DDL操作相關(guān)的信息之前，執(zhí)行下述操作：

在本地MySQL數(shù)據(jù)庫(kù)中執(zhí)行所述DDL操作。

5.根據(jù)權(quán)利要求4所述的基于binlog的元數(shù)據(jù)管理方法，其特征在于，所述存儲(chǔ)與DDL操作相關(guān)的信息是指，將與DDL操作相關(guān)的DDL語(yǔ)句和時(shí)間戳信息存儲(chǔ)在本地MySQL數(shù)據(jù)庫(kù)中的一個(gè)用于存儲(chǔ)元數(shù)據(jù)相關(guān)信息的特定數(shù)據(jù)表中；

相應(yīng)的，所述方法還包括：

將所述獲取基準(zhǔn)元數(shù)據(jù)的時(shí)間點(diǎn)和存儲(chǔ)基準(zhǔn)元數(shù)據(jù)所使用的文件名稱，存儲(chǔ)在本地MySQL數(shù)據(jù)庫(kù)中的所述特定數(shù)據(jù)表中。

6.根據(jù)權(quán)利要求5所述的基于binlog的元數(shù)據(jù)管理方法，其特征在于，包括：

按照預(yù)先設(shè)定的時(shí)間間隔，定期執(zhí)行下述操作：

從本地MySQL數(shù)據(jù)庫(kù)獲取對(duì)應(yīng)于MySQL主數(shù)據(jù)庫(kù)的元數(shù)據(jù)；

壓縮所述元數(shù)據(jù)，并將壓縮后的元數(shù)據(jù)以文件的形式存儲(chǔ)在本地文件系統(tǒng)中，作為與本次執(zhí)行獲取操作的時(shí)間點(diǎn)對(duì)應(yīng)的基準(zhǔn)元數(shù)據(jù)；

將獲取上述基準(zhǔn)元數(shù)據(jù)的時(shí)間點(diǎn)和存儲(chǔ)所述基準(zhǔn)元數(shù)據(jù)的文件名稱，存儲(chǔ)在本地MySQL數(shù)據(jù)庫(kù)中的所述特定數(shù)據(jù)表中。

7.根據(jù)權(quán)利要求6所述的基于binlog的元數(shù)據(jù)管理方法，其特征在于，包括：

按照預(yù)先設(shè)定的時(shí)間間隔，從本地文件系統(tǒng)中刪除存儲(chǔ)時(shí)間超過(guò)預(yù)先設(shè)定期限的基準(zhǔn)元數(shù)據(jù)文件，并從本地MySQL數(shù)據(jù)庫(kù)中刪除與被刪除的文件對(duì)應(yīng)的DDL操作的相關(guān)信息。

8.一種基于binlog的元數(shù)據(jù)管理裝置，其特征在于，包括：

基準(zhǔn)元數(shù)據(jù)獲取單元，用于從MySQL主數(shù)據(jù)庫(kù)獲取元數(shù)據(jù)，作為基準(zhǔn)元數(shù)據(jù)；

DDL操作信息獲取單元，用于以上述獲取基準(zhǔn)元數(shù)據(jù)的時(shí)間點(diǎn)為起點(diǎn)，獲取并存儲(chǔ)MySQL主數(shù)據(jù)庫(kù)執(zhí)行的DDL操作信息；

所述DDL操作信息獲取單元包括：

binlog數(shù)據(jù)獲取子單元，用于以上述獲取基準(zhǔn)元數(shù)據(jù)的時(shí)間點(diǎn)為起點(diǎn)，從所述MySQL主數(shù)據(jù)庫(kù)獲取二進(jìn)制日志binlog數(shù)據(jù)；

DDL信息處理子單元，用于針對(duì)binlog數(shù)據(jù)中的每個(gè)日志事件，判斷該日志事件記錄的是否為DDL操作；若是，存儲(chǔ)與所述DDL操作相關(guān)的信息。

9.根據(jù)權(quán)利要求8所述的基于binlog的元數(shù)據(jù)管理裝置，其特征在于，所述DDL操作信息獲取單元存儲(chǔ)的DDL信息包括：所述DDL操作對(duì)應(yīng)的DDL語(yǔ)句，以及所述DDL操作在所述binlog數(shù)據(jù)中對(duì)應(yīng)的時(shí)間戳信息。

10.根據(jù)權(quán)利要求9所述的基于binlog的元數(shù)據(jù)管理裝置，其特征在于，包括：

數(shù)據(jù)壓縮單元，用于壓縮所述基準(zhǔn)元數(shù)據(jù)，并將壓縮后的基準(zhǔn)元數(shù)據(jù)以文件的形式存儲(chǔ)在本地文件系統(tǒng)中。