[發明專利]數據轉移系統及方法在審
| 申請號: | 201711260667.5 | 申請日: | 2017-12-04 |
| 公開(公告)號: | CN109947738A | 公開(公告)日: | 2019-06-28 |
| 發明(設計)人: | 賴槿峰;賴盈勳;蕭宇程;莊棨椉 | 申請(專利權)人: | 財團法人資訊工業策進會 |
| 主分類號: | G06F16/21 | 分類號: | G06F16/21;G06F16/22;G06F16/28 |
| 代理公司: | 北京律誠同業知識產權代理有限公司 11006 | 代理人: | 徐金國 |
| 地址: | 中國臺灣臺北市*** | 國省代碼: | 中國臺灣;71 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據節點 查詢指令信息 數據轉移系統 分散式 關聯式 處理器 關聯分析模塊 指令分析模塊 關聯度信息 決策模塊 數據表格 效能分析 記憶體存取 記錄文件 時間產生 數據轉移 信息選擇 關聯度 記憶體 指令集 存取 延遲 應用 | ||
1.一種數據轉移系統,應用于一關聯式數據節點以及多個分散式數據節點,其特征在于,包含:
一記憶體,儲存一指令集;以及
一處理器,電性耦接于該記憶體,自該記憶體存取并執行該指令集,其中該處理器包含:
一關聯分析模塊,分析該關聯式數據節點中的多個數據表格的被存取次數之間的相關性以產生一關聯度信息;
一指令分析模塊,搜尋該關聯式數據節點的記錄文件中的多個查詢指令以產生一查詢指令信息;
一效能分析模塊,測試所述多個分散式數據節點各自執行該查詢指令信息的時間以產生一節點效能信息;以及
一決策模塊,根據該關聯度信息以及該查詢指令信息選擇所述多個數據表格中關聯度高的至少二者為一第一數據表格集合,并根據該節點效能信息選擇將該第一數據表格集合轉移至所述多個分散式數據節點中的一第一分散式數據節點。
2.根據權利要求1所述的數據轉移系統,其特征在于,該處理器還包含:
一轉移模塊,判斷該決策模塊選擇的該第一數據表格集合的數據量是否小于該第一分散式數據節點的容量,若判定該第一數據表格集合的數據量小于該第一分散式數據節點的容量,將該第一數據表格集合轉移至該第一分散式數據節點,若判定該第一數據表格集合的數據量不小于第一分散式數據節點的容量,將該第一數據表格集合中的至少一維度表格保留以對該第一數據表格集合進行切分,再將切分后的該第一數據表格集合轉移至該第一分散式數據節點。
3.根據權利要求2所述的數據轉移系統,其特征在于,該轉移模塊先將該第一數據表格集合的主要鍵以及外來鍵轉移至該第一分散式數據節點,再根據該查詢指令信息當中所述多個查詢指令的執行頻率將該第一數據表格集合的各欄位依據使用率排序并轉移至該第一分散式數據節點。
4.根據權利要求1所述的數據轉移系統,其特征在于,該效能分析模塊自所述多個數據表格中選取一測試數據表格,并將該測試數據表格復制至所述多個分散式數據節點,并測試所述多個分散式數據節點各自于該測試數據表格當中執行該查詢指令信息的時間以產生該節點效能信息。
5.根據權利要求4所述的數據轉移系統,其特征在于,該測試數據表格是于所述多個數據表格當中占一預設百分比或一預設筆數。
6.根據權利要求1所述的數據轉移系統,其特征在于,該決策模塊是根據該查詢指令信息當中所述多個查詢指令的執行頻率判斷所述多個數據表格的使用率,并選擇所述多個數據表格中使用率最高的一者以及相關于使用率最高的該者的至少另一者為該第一數據表格集合。
7.根據權利要求1所述的數據轉移系統,其特征在于,當該第一數據表格集合被轉移至該第一分散式數據節點后,該決策模塊再選擇使用率次高的所述多個數據表格中的其他至少二者為一第二數據表格集合,并將該第二數據表格集合轉移到所述多個分散式數據節點中。
8.根據權利要求1所述的數據轉移系統,其特征在于,該關聯分析模塊是根據記錄所述多個數據表格被存取次數的一依存結構矩陣判斷所述多個數據表格被存取次數之間的相關性以產生該關聯度信息。
9.根據權利要求1所述的數據轉移系統,其特征在于,該指令分析模塊搜尋該關聯式數據節點的記錄文件,并獲取用于存取所述多個數據表格的所述多個查詢指令,并選取所述多個查詢指令當中執行頻率高者以產生該查詢指令信息。
10.根據權利要求1所述的數據轉移系統,其特征在于,該決策模塊是根據該節點效能信息選擇所述多個分散式數據節點中執行該查詢指令信息當中的所述多個查詢指令的時間最短者為該第一分散式數據節點。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于財團法人資訊工業策進會,未經財團法人資訊工業策進會許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201711260667.5/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:針對多源異構數據的多維決策分析及可視化系統
- 下一篇:數據源管理方法及裝置





