[發(fā)明專利]一種基于大數(shù)據(jù)復(fù)雜運(yùn)算的接力計(jì)算方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201610184695.2
• 申請(qǐng)日: 2016-03-28
• 公開（公告）號(hào): CN105868554B
• 公開（公告）日: 2018-03-27
• 發(fā)明（設(shè)計(jì)）人: 朱洲森
• 申請(qǐng)（專利權(quán)）人: 朱洲森
• 主分類號(hào): G06F19/00
• 分類號(hào): G06F19/00
• 代理公司: 北京眾合誠(chéng)成知識(shí)產(chǎn)權(quán)代理有限公司11246
• 代理人: 裴娜

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)大數(shù)據(jù)運(yùn)算方法技術(shù)領(lǐng)域，具體涉及一種基于大數(shù)據(jù)復(fù)雜運(yùn)算的接力計(jì)算方法。

背景技術(shù)

隨著網(wǎng)絡(luò)的大規(guī)模普及和發(fā)展，越來(lái)越多的企業(yè)、社區(qū)、學(xué)校等部門都應(yīng)用了如人力資源數(shù)據(jù)管理軟件。這些軟件分布獨(dú)立運(yùn)作，保障了人力資源的合理分配，提供了輔助決策信息和追溯管理憑據(jù)。因此，自動(dòng)分析數(shù)據(jù)異常信息，實(shí)時(shí)查詢上層數(shù)據(jù)，以提高人力資源管理的智能性，是當(dāng)前人力資源管理領(lǐng)域備受關(guān)注前沿技術(shù)，擁有巨大市場(chǎng)需求。

一個(gè)微型企事業(yè)單位的數(shù)據(jù)網(wǎng)絡(luò)，最少也包括數(shù)百個(gè)數(shù)據(jù)。這些數(shù)據(jù)一般通過(guò)多通道采集的方式，集中采集到企事業(yè)單位的數(shù)據(jù)網(wǎng)絡(luò)服務(wù)器中，并作為企事業(yè)單位管理的最小管理單元，為保障企事業(yè)單位的人力資源管理提供了有力保障。而一個(gè)地區(qū)往往包括數(shù)百個(gè)這樣的企事業(yè)單位，一個(gè)行政片區(qū)又包括多個(gè)地區(qū)。簡(jiǎn)單來(lái)說(shuō)，一個(gè)中等規(guī)模的行政片區(qū)擁有數(shù)萬(wàn)個(gè)最小數(shù)據(jù)管理單元，以及上百萬(wàn)兆的人力資源管理數(shù)據(jù)。同時(shí)這些最小管理單元相互獨(dú)立，彼此間信息并不互聯(lián)，一旦發(fā)生異常情況，如何能夠快速地從查詢目標(biāo)，是企事業(yè)單位人力資源管理網(wǎng)絡(luò)的一個(gè)極具挑戰(zhàn)的問(wèn)題。

在實(shí)際應(yīng)用中，多數(shù)智能服務(wù)器的管理方法針對(duì)位置固定的單一企事業(yè)單位，但是企事業(yè)單位的管理數(shù)據(jù)本身具有局限性，當(dāng)發(fā)現(xiàn)異常查詢處理。

針對(duì)大數(shù)據(jù)的復(fù)雜運(yùn)算，一般處理軟件會(huì)造成在數(shù)據(jù)庫(kù)端、Web服務(wù)器端或客戶端之一的處理瓶頸，往往使得一處的運(yùn)算和處理接近滿負(fù)荷或積壓，而另外兩處卻等待或閑置，大大影響系統(tǒng)的整體速度和性能

發(fā)明內(nèi)容

本發(fā)明的目的在于克服現(xiàn)有技術(shù)中的缺陷，提供一種將大數(shù)據(jù)量的復(fù)雜運(yùn)算過(guò)程分解，使每一層負(fù)擔(dān)一部分處理和運(yùn)算任務(wù)，在給用戶顯示前處理完成的基于大數(shù)據(jù)復(fù)雜運(yùn)算的接力計(jì)算方法。

為實(shí)現(xiàn)上述目的，本發(fā)明所采用的技術(shù)方案是：

一種基于大數(shù)據(jù)復(fù)雜運(yùn)算的接力計(jì)算方法，其特征在于，所述方法包括如下計(jì)算步驟：

S1：計(jì)算機(jī)系統(tǒng)經(jīng)過(guò)動(dòng)態(tài)分配，將數(shù)據(jù)提取、規(guī)范、簡(jiǎn)單運(yùn)算放在數(shù)據(jù)庫(kù)訪問(wèn)端完成；

S2：之后將半成品結(jié)果傳遞給Web服務(wù)器，由Web服務(wù)器的專門研制的運(yùn)算處理模塊利用Web服務(wù)器的硬件資源進(jìn)一步處理數(shù)據(jù)，完成大數(shù)據(jù)基本的計(jì)算任務(wù)；

S3：之后，將S2中未完成格式化的數(shù)據(jù)傳遞給客戶端，由客戶端采用先進(jìn)的客戶端控件，利用JS客戶端程序完成最后簡(jiǎn)單合并、相加減、截取、過(guò)濾的計(jì)算，以及對(duì)數(shù)據(jù)進(jìn)行格式顯示、圖表展示、排序、著重顯示、關(guān)聯(lián)突出處理。

其中優(yōu)選的技術(shù)方案是，所述S1中的動(dòng)態(tài)分配是將分配器傳來(lái)的數(shù)據(jù)訪問(wèn)交由系列計(jì)算器完成，系列計(jì)算器將判斷數(shù)據(jù)量的大小，根據(jù)數(shù)據(jù)量大小決定進(jìn)行完整運(yùn)算還是進(jìn)行初運(yùn)算。

優(yōu)選的技術(shù)方案還有，所述系列計(jì)算器將判斷數(shù)據(jù)量的大小的過(guò)程包括分配器的數(shù)據(jù)請(qǐng)求，包括有不含運(yùn)算的請(qǐng)求、復(fù)雜運(yùn)算的請(qǐng)求和簡(jiǎn)單運(yùn)算的請(qǐng)求，其中不含運(yùn)算的請(qǐng)求經(jīng)由直接快速插敘運(yùn)算的數(shù)據(jù)處理輸出傳送到上層，復(fù)雜運(yùn)算的請(qǐng)求經(jīng)由進(jìn)行讀取，僅做初步運(yùn)算，傳輸?shù)缴霞?jí)的數(shù)據(jù)處理輸出傳送到上層，簡(jiǎn)單運(yùn)算的請(qǐng)求經(jīng)由立即計(jì)算的數(shù)據(jù)處理輸出傳送到上層。

進(jìn)一步優(yōu)選的技術(shù)方案是，所述S2中的Web服務(wù)器中采用分配層和迭代運(yùn)算層邏輯運(yùn)算，其迭代運(yùn)算層邏輯運(yùn)算的過(guò)程包括：接收客戶端原始運(yùn)算請(qǐng)求，原始運(yùn)算請(qǐng)求發(fā)往數(shù)據(jù)庫(kù)服務(wù)器，由數(shù)據(jù)庫(kù)服務(wù)器完成數(shù)據(jù)提取和初步運(yùn)算，然后轉(zhuǎn)交層疊運(yùn)算器并提交運(yùn)算，將未完成運(yùn)算的數(shù)據(jù)交層疊運(yùn)算器進(jìn)一步運(yùn)算，層疊運(yùn)算器完成主要運(yùn)算后，將運(yùn)算結(jié)果輸出提交到客戶端。

本發(fā)明的優(yōu)點(diǎn)和有益效果在于：所述基于大數(shù)據(jù)復(fù)雜運(yùn)算的接力計(jì)算方法是計(jì)針對(duì)大數(shù)據(jù)的復(fù)雜運(yùn)算邏輯與實(shí)現(xiàn)步驟，該方法避免了一般處理軟件會(huì)造成在數(shù)據(jù)庫(kù)端、Web服務(wù)器端或客戶端之一的處理瓶頸，也大大減少甚至消除了一處的運(yùn)算和處理接近滿負(fù)荷或積壓，而另外兩處卻等待或閑置的狀況，大大影響系統(tǒng)的整體速度和性能。該設(shè)計(jì)的思路為將大數(shù)據(jù)量的復(fù)雜運(yùn)算過(guò)程分解，使每一層負(fù)擔(dān)一部分處理和運(yùn)算任務(wù)，在給用戶顯示前處理完成。