[發明專利]一種集群的外部數據訪問方法在審
| 申請號： | 201710946005.7 | 申請日： | 2017-10-12 |
| 公開（公告）號： | CN107885460A | 公開（公告）日： | 2018-04-06 |
| 發明（設計）人： | 孫旭 | 申請（專利權）人： | 北京人大金倉信息技術股份有限公司 |
| 主分類號： | G06F3/06 | 分類號： | G06F3/06 |
| 代理公司： | 北京紐樂康知識產權代理事務所(普通合伙)11210 | 代理人： | 秦月貞 |
| 地址： | 100083 北京市朝陽區*** | 國省代碼： | 北京;11 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 一種 集群 外部 數據 訪問 方法 | ||
1.一種集群的外部數據訪問方法，其特征在于，包括以下步驟：
S1 在外部存放數據的機器上，啟動文件加載進程，并對外提供網絡接口服務；
S2 集群中在計算節點上啟動ForeignTableScan算子，并行的連接文件加載進程、并行地加載數據。
2.根據權利要求1所述的集群的外部數據訪問方法，其特征在于，S1進一步包括：
S11對外啟動特定的網絡端口服務；
S12集群的計算節點連接網絡服務；
S13 集群的計算節點發送讀取指令；
S14 文件加載進程發送一定數據量的數據給計算節點。
3.根據權利要求2所述的集群的外部數據訪問方法，其特征在于，S11中在加載機器啟動網絡端口，將加載機作為加載服務器。
4.根據權利要求2所述的集群的外部數據訪問方法，其特征在于，S12中集群的計算節點可以連接加載機服務，并請求數據。
5.根據權利要求2所述的集群的外部數據訪問方法，其特征在于，S13中集群的計算節點可以發送讀取數據指令，此時，文件加載進程可以發送數據給這個計算節點。
6.根據權利要求1所述的集群的外部數據訪問方法，其特征在于，S2進一步包括：
S21在ForeignTableScan，根據自身的節點ID，輪詢連接數據加載服務進程；
S22 發送讀取數據指令，計算節點每次處理完數據，主動請求數據；
S23讀取數據，并按照數據分隔符解析數據，將解析好的數據表示成內核元組形式，所述元組參與后續計算。
7.根據權利要求6所述的集群的外部數據訪問方法，其特征在于，S23中加載服務器回饋一定數據量的數據，計算節點根據一定的格式，將接受的數據解析成各個字段，并將其轉化成內部元組，由ForeignTableScan返回，進行下一步SQL運算。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于北京人大金倉信息技術股份有限公司，未經北京人大金倉信息技術股份有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/201710946005.7/1.html，轉載請聲明來源鉆瓜專利網。
- 上一篇：一種多功能會計印章
- 下一篇：一種基于云平臺管控的物聯印章
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
