[發明專利]一種中小企業低耦合異構數據同步方法在審
| 申請號: | 202310246844.3 | 申請日: | 2023-03-15 |
| 公開(公告)號: | CN116383302A | 公開(公告)日: | 2023-07-04 |
| 發明(設計)人: | 李亞運;季益亮;謝汶達;陳云濤;趙音龍;陳豐生 | 申請(專利權)人: | 海納致遠數字科技(上海)有限公司 |
| 主分類號: | G06F16/27 | 分類號: | G06F16/27;G06F9/54 |
| 代理公司: | 上海申浩律師事務所 31280 | 代理人: | 陸葉 |
| 地址: | 200030 上海市*** | 國省代碼: | 上海;31 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 中小企業 耦合 數據 同步 方法 | ||
1.一種中小企業低耦合異構數據同步方法,其特征在于:具體步驟如下:
步驟一、搭建高可用RabbitMQ作為分布式消息隊列;
步驟二、搭建高可用MySQL集群和高可用MongoDB集群;
步驟三、配置MySQL,開啟binlog寫入功能,配置binlog-format為ROW模式;
步驟四、配置DataX,安裝MySQL和MongoDB插件,并修改Job參數,執行離線同步任務;
步驟五、修改Canal配置文件,將涉及RabbitMQ和MySQL的參數按實際情況進行調整,然后啟動Canal-server;
步驟六、訂閱RabbitMQ消息,解析binlog消息并將增量數據保存至MongoDB,實現近實時數據同步。
2.根據權利要求1所述的一種中小企業低耦合異構數據同步方法,其特征在于:可根據業務進行選擇離線同步或實時同步操作,如果需要選擇實時同步操作,需要提前部署消息解析服務,即業務服務。
3.根據權利要求1所述的一種中小企業低耦合異構數據同步方法,其特征在于:基于RabbitMQ的死信隊列,可對異常解析的消息進行緩存或進行異常提醒通知。
4.根據權利要求1所述的一種中小企業低耦合異構數據同步方法,其特征在于:采用Canal進行近實時數據同步,對增量數據進行近實時保存至業務所需數據庫或搜索引擎。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于海納致遠數字科技(上海)有限公司,未經海納致遠數字科技(上海)有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202310246844.3/1.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





