[發(fā)明專利]一種異構(gòu)數(shù)據(jù)庫之間多線程數(shù)據(jù)交換的方法

無效

• 申請?zhí)枺?/td>: 201110451861.8
• 申請日: 2011-12-20
• 公開（公告）號: CN102591725A
• 公開（公告）日: 2012-07-18
• 發(fā)明（設(shè)計）人: 鐘宏澤;趙鵬
• 申請（專利權(quán)）人: 浙江鴻程計算機系統(tǒng)有限公司
• 主分類號: G06F9/54
• 分類號: G06F9/54;G06F17/30
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種異構(gòu)數(shù)據(jù)庫之間多線程數(shù)據(jù)交換的方法，其特征在于，包括讀線程、寫線程和監(jiān)控管理線程，讀線程負責(zé)通過源對象接口從不同操作系統(tǒng)、不同類型的源數(shù)據(jù)庫讀取數(shù)據(jù)，并以數(shù)據(jù)包形式放入數(shù)據(jù)緩沖池數(shù)據(jù)隊列頭部；寫線程負責(zé)從數(shù)據(jù)緩沖池數(shù)據(jù)隊列的尾部讀取數(shù)據(jù)，并通過目標(biāo)對象接口寫入不同操作系統(tǒng)、不同類型的目標(biāo)數(shù)據(jù)庫；監(jiān)控管理線程負責(zé)整體系統(tǒng)的運行管理；其實施包括如下步驟：

1)讀入配置參數(shù)，包括讀寫數(shù)據(jù)包大小、數(shù)據(jù)轉(zhuǎn)換規(guī)則、源數(shù)據(jù)庫信息、目標(biāo)數(shù)據(jù)庫信息、日志文件信息和讀線程、寫線程啟動數(shù)；

2)按照步驟1)所述配置參數(shù)要求，啟動監(jiān)管管理線程、讀線程和寫線程；

3)讀線程根據(jù)配置參數(shù)情況生成一個或多個線程，通過源對象接口連接源數(shù)據(jù)庫，將獲取的數(shù)據(jù)分批放入到緩沖池中，當(dāng)緩沖池未滿時數(shù)據(jù)被加入到緩沖池中的數(shù)據(jù)隊列的頭部，當(dāng)緩沖池滿了的時候，阻塞讀線程；

4)寫線程根據(jù)配置參數(shù)情況生成一個或多個線程，連接目標(biāo)數(shù)據(jù)庫，從緩沖池的數(shù)據(jù)隊列尾部獲取數(shù)據(jù)并通過目標(biāo)對象接口寫入目標(biāo)數(shù)據(jù)庫，若緩沖池?zé)o數(shù)據(jù)則阻塞寫線程；

5)監(jiān)控管理線程負責(zé)監(jiān)控讀寫線程的工作情況，并記錄日志，供調(diào)優(yōu)分析，并根據(jù)調(diào)優(yōu)分析結(jié)果動態(tài)調(diào)整讀線程和寫線程的比例和數(shù)量；

6)如果所有的讀線程發(fā)現(xiàn)沒有數(shù)據(jù)可讀，并且數(shù)據(jù)緩沖池中數(shù)據(jù)隊列長度為零，此時系統(tǒng)結(jié)束讀線程和寫線程，進行數(shù)據(jù)清理，監(jiān)控管理線程停止整個過程。

2.根據(jù)權(quán)利要求1所述的一種異構(gòu)數(shù)據(jù)庫之間多線程數(shù)據(jù)交換的方法，其特征在于，所述的數(shù)據(jù)包大小為2～10M之間。

3.根據(jù)權(quán)利要求1所述的一種異構(gòu)數(shù)據(jù)庫之間多線程數(shù)據(jù)交換的方法，其特征在于，步驟1)所述的讀入配置參數(shù)也可以將配置信息寫到配置文件中，然后指定配置文件路徑，通過讀入文件的方式獲得。

4.根據(jù)權(quán)利要求1所述的一種異構(gòu)數(shù)據(jù)庫之間多線程數(shù)據(jù)交換的方法，其特征在于，步驟1)所述配置參數(shù)的數(shù)據(jù)轉(zhuǎn)換規(guī)則可以通過指定函數(shù)的方式處理。

5.根據(jù)權(quán)利要求1所述的一種異構(gòu)數(shù)據(jù)庫之間多線程數(shù)據(jù)交換的方法，其特征在于，步驟1)所述配置參數(shù)的源數(shù)據(jù)庫信息包括源數(shù)據(jù)庫url、操作系統(tǒng)、數(shù)據(jù)庫類型、數(shù)據(jù)庫名稱、用戶名、密碼。

6.根據(jù)權(quán)利要求1所述的一種異構(gòu)數(shù)據(jù)庫之間多線程數(shù)據(jù)交換的方法，其特征在于，步驟1)所述配置參數(shù)的目標(biāo)數(shù)據(jù)庫信息包括目標(biāo)源數(shù)據(jù)庫url、操作系統(tǒng)、數(shù)據(jù)庫類型、數(shù)據(jù)庫名稱、用戶名、密碼。

7.根據(jù)權(quán)利要求1所述的一種異構(gòu)數(shù)據(jù)庫之間多線程數(shù)據(jù)交換的方法，其特征在于，源數(shù)據(jù)庫或目標(biāo)數(shù)據(jù)庫數(shù)量可以是1個或多個。

8.根據(jù)權(quán)利要求1-7任一權(quán)利要求所述的一種異構(gòu)數(shù)據(jù)庫之間多線程數(shù)據(jù)交換的方法，其特征在于，源數(shù)據(jù)庫或目標(biāo)數(shù)據(jù)庫可以是文件類型。