[發(fā)明專利]一種標準服務平臺分布式并行計算數(shù)據(jù)庫及其檢索方法

有效

• 申請?zhí)枺?/td>: 201410291595.0
• 申請日: 2014-06-26
• 公開（公告）號: CN104090934B
• 公開（公告）日: 2017-09-12
• 發(fā)明（設計）人: 李鳳龍;劉麗梅;張建凱;楊福萍;王秀芹
• 申請（專利權）人: 山東金質(zhì)信息技術有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 濟南舜源專利事務所有限公司37205
• 代理人: 趙佳民

1.一種標準服務平臺分布式并行計算數(shù)據(jù)庫，其特征在于包括：

節(jié)點數(shù)據(jù)庫服務器集群，包含若干節(jié)點數(shù)據(jù)庫服務器，每個節(jié)點數(shù)據(jù)庫服務器負責所分配節(jié)點數(shù)據(jù)的查詢管理；

調(diào)度中心，用于實現(xiàn)外部標準化數(shù)據(jù)至所述節(jié)點數(shù)據(jù)庫服務器集群的引導存儲，并將一級緩存中心發(fā)送的查詢檢索命令并行轉(zhuǎn)發(fā)給所有節(jié)點數(shù)據(jù)庫服務器，然后將所有節(jié)點數(shù)據(jù)庫服務器查詢檢索結(jié)果進行二次加工篩選后輸送至一級緩存中心；

一級緩存中心，用于提供調(diào)度中心所輸送查詢檢索結(jié)果的臨時存儲，并提供與數(shù)據(jù)庫前端的查詢交互；

監(jiān)控中心，用于實現(xiàn)節(jié)點數(shù)據(jù)庫服務器集群、調(diào)度中心和一級緩存中心的性能指標的實時監(jiān)控、預警；

所述調(diào)度中心包括數(shù)據(jù)引導服務模塊、數(shù)據(jù)匯聚服務模塊、分布式調(diào)度中心和注冊中心；

所述分布式調(diào)度中心用于對接收到的一級緩存中心發(fā)送的查詢檢索命令利用多主機多核多線程的并行技術轉(zhuǎn)發(fā)給所有節(jié)點數(shù)據(jù)庫服務器；

所述數(shù)據(jù)匯聚服務模塊用于將所有節(jié)點數(shù)據(jù)庫服務器檢索到的符合查詢檢索要求的檢索結(jié)果抽取匯集到數(shù)據(jù)匯聚服務模塊，然后按照排序規(guī)則進行排序，截取符合排序要求的數(shù)據(jù)，對查詢檢索結(jié)果進行二次加工篩選后輸送至緩存中心；

所述注冊中心用于維護節(jié)點數(shù)據(jù)庫服務器相關元數(shù)據(jù)，并通過心跳、主動通知、人工巡檢機制實現(xiàn)節(jié)點數(shù)據(jù)庫服務器的監(jiān)控管理；

所述數(shù)據(jù)引導服務模塊，用于實現(xiàn)外部標準化數(shù)據(jù)至所述節(jié)點數(shù)據(jù)庫服務器集群的存儲，并聯(lián)合注冊中心、監(jiān)控中心實現(xiàn)節(jié)點數(shù)據(jù)庫服務器的自動漂移和容災機制；

所述自動漂移機制，是當節(jié)點數(shù)據(jù)庫服務器存儲的標準數(shù)據(jù)容量超出其閾值時，自動溢出轉(zhuǎn)移到其他重新分配的節(jié)點數(shù)據(jù)庫服務器中；

所述容災機制，是每個節(jié)點數(shù)據(jù)庫服務器下含有多個附屬節(jié)點數(shù)據(jù)庫服務器與之相連，所述附屬節(jié)點數(shù)據(jù)庫服務器為其映射服務器，內(nèi)部標準數(shù)據(jù)完全相同，在當前節(jié)點數(shù)據(jù)庫服務器不能正常工作時，附屬節(jié)點數(shù)據(jù)庫服務器自動接替當前模塊完成工作；

所述一級緩存中心包括緩存中心、查詢模塊和緩存調(diào)度中心；

所述緩存中心用于提供調(diào)度中心所輸送查詢檢索結(jié)果的臨時存儲；

所述緩存調(diào)度中心用于對緩存中心存儲的標準數(shù)據(jù)存儲提取方式、順序進行管理；

所述查詢模塊用于提供查詢端口，并在接收到檢索命令后，首選去緩存中心進行查詢檢索，若存在，直接在數(shù)據(jù)庫前端輸出查詢結(jié)果，否則，將查詢檢索命令通過緩存調(diào)度中心輸送至分布式調(diào)度中心進行各個節(jié)點數(shù)據(jù)庫服務器的查詢檢索。

2.根據(jù)權利要求1所述的一種標準服務平臺分布式并行計算數(shù)據(jù)庫，其特征在于：所述元數(shù)據(jù)包括節(jié)點數(shù)據(jù)庫服務器IP、端口號、包含的標準組織及組織下的標準數(shù)據(jù)量。

3.根據(jù)權利要求1所述的一種標準服務平臺分布式并行計算數(shù)據(jù)庫，其特征在于：所述一級緩存中心存放于操作系統(tǒng)緩存中，所述操作系統(tǒng)緩存為硬盤控制器內(nèi)存芯片。

4.一種權利要求1所述標準服務平臺分布式并行計算數(shù)據(jù)庫的檢索方法，其特征在于包括如下步驟：

Step1: 輸入檢索要素，構(gòu)建檢索命令；

Step2: 對緩存中心存儲的標準數(shù)據(jù)進行檢索匹配，若緩存中心存在滿足檢索命令的標準數(shù)據(jù)，則執(zhí)行步驟3，否則執(zhí)行step4；

Step3: 直接向數(shù)據(jù)庫前端反饋滿足檢索命令的檢索結(jié)果；

Step4: 將檢索命令轉(zhuǎn)發(fā)給所有節(jié)點數(shù)據(jù)庫服務器，每個節(jié)點數(shù)據(jù)庫服務器負責其管理的標準數(shù)據(jù)的檢索；

Step5:在每個節(jié)點數(shù)據(jù)庫服務器中，提取出滿足檢索命令的標準數(shù)據(jù)，并按照節(jié)點數(shù)據(jù)庫服務器排序規(guī)則輸出檢索結(jié)果；

Step6:將所有節(jié)點數(shù)據(jù)庫服務器的檢索結(jié)果進行匯聚，并按照數(shù)據(jù)匯聚服務模塊排序規(guī)則再對匯聚后的檢索結(jié)果進行排序，然后根據(jù)數(shù)據(jù)庫前端設置的閾值，截取閾值范圍內(nèi)的符合條件的結(jié)果；

Step7: 將截取得到的數(shù)據(jù)存入緩存中心，便于下次查詢檢索；

Step8: 將截取得到的數(shù)據(jù)按照數(shù)據(jù)庫前端展現(xiàn)頁面設定的分頁規(guī)則逐頁顯示；

所述Step5中節(jié)點數(shù)據(jù)庫服務器對內(nèi)部管理的標準數(shù)據(jù)進行檢索時，首先提取符合查詢檢索命令的元數(shù)據(jù)，然后根據(jù)元數(shù)據(jù)獲取匹配檢索命令的標準數(shù)據(jù)。