[發(fā)明專利]異常數(shù)據(jù)處理方法及裝置

在審

• 申請?zhí)枺?/td>: 201811487113.3
• 申請日: 2018-12-06
• 公開（公告）號: CN109766331A
• 公開（公告）日: 2019-05-17
• 發(fā)明（設計）人: 鐘秋發(fā);吳又奎;趙正旭
• 申請（專利權）人: 中科恒運股份有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215
• 代理公司: 石家莊國為知識產(chǎn)權事務所 13120
• 代理人: 秦敏華

本發(fā)明提供了一種異常數(shù)據(jù)處理方法及裝置，該方法應用于數(shù)據(jù)處理技術領域，所述方法包括：獲取待處理數(shù)據(jù)；根據(jù)所述待處理數(shù)據(jù)和預設異常指數(shù)確定標準數(shù)據(jù)范圍；根據(jù)所述標準數(shù)據(jù)范圍確定所述待處理數(shù)據(jù)的異常值；根據(jù)所述標準數(shù)據(jù)范圍對所述異常值進行修正。本發(fā)明提供的異常數(shù)據(jù)處理方法及裝置能夠實現(xiàn)待處理數(shù)據(jù)異常值的快速檢測和修正。

技術領域

本發(fā)明屬于數(shù)據(jù)處理技術領域，更具體地說，是涉及一種異常數(shù)據(jù)處理方法及裝置。

背景技術

在現(xiàn)實中,由于人為錯誤或自然錯誤會導致產(chǎn)生數(shù)據(jù)異常值，在多數(shù)據(jù)源的環(huán)境下，出現(xiàn)數(shù)據(jù)異常并產(chǎn)生數(shù)據(jù)沖突的概率大大增加。如何處理這些異常值便是數(shù)據(jù)清洗所面臨的一個重要課題。

在數(shù)據(jù)處理中，尤其在作函數(shù)擬合時，異常點的出現(xiàn)不僅會很大程度的改變函數(shù)擬合的效果，而且有時還會使得函數(shù)的梯度出現(xiàn)奇異梯度，很容易導致算法的終止，從而影響研究變量之間的函數(shù)關系。為了有效的避免這些異常點造成的損失，我們需要采取一定的方法對其進行處理。但在多數(shù)據(jù)源、大數(shù)據(jù)量的情況下，現(xiàn)有技術中缺少一種檢測異常值并對異常值進行快速處理的方法。

發(fā)明內容

本發(fā)明的目的在于提供一種異常數(shù)據(jù)處理方法及裝置，以解決現(xiàn)有技術中存在的無法快速進行異常數(shù)據(jù)處理的技術問題。

本發(fā)明實施例的第一方面，提供了一種異常數(shù)據(jù)處理方法，所述方法包括：

獲取待處理數(shù)據(jù)；

根據(jù)所述待處理數(shù)據(jù)和預設異常指數(shù)確定標準數(shù)據(jù)范圍；

根據(jù)所述標準數(shù)據(jù)范圍確定所述待處理數(shù)據(jù)的異常值；

根據(jù)所述標準數(shù)據(jù)范圍對所述異常值進行修正。

本發(fā)明實施例的第二方面，提供了一種異常數(shù)據(jù)處理裝置，所述裝置包括：

數(shù)據(jù)獲取模塊，用于獲取待處理數(shù)據(jù)；

范圍確定模塊，用于根據(jù)所述待處理數(shù)據(jù)和預設異常指數(shù)確定標準數(shù)據(jù)范圍；

檢測模塊，用于根據(jù)所述標準數(shù)據(jù)范圍確定所述待處理數(shù)據(jù)的異常值；

修正模塊，用于根據(jù)所述標準數(shù)據(jù)范圍對所述異常值進行修正。

本發(fā)明實施例的第三方面，提供了一種終端設備，包括存儲器、處理器以及存儲在所述存儲器中并可在所述處理器上運行的計算機程序，所述處理器執(zhí)行所述計算機程序時實現(xiàn)上述的異常數(shù)據(jù)處理方法的步驟。

本發(fā)明實施例的第四方面，提供了一種計算機可讀存儲介質，所述計算機可讀存儲介質存儲有計算機程序，所述計算機程序被處理器執(zhí)行時實現(xiàn)上述的異常數(shù)據(jù)處理方法的步驟。

本發(fā)明提供的異常數(shù)據(jù)處理方法及裝置的有益效果在于：本發(fā)明提供的異常數(shù)據(jù)處理方法及裝置先通過待處理數(shù)據(jù)和預設異常指數(shù)建立標準數(shù)據(jù)范圍，再根據(jù)標準數(shù)據(jù)范圍對異常值進行篩選和修正，從而實現(xiàn)對異常數(shù)據(jù)的快速檢測和處理。

附圖說明

為了更清楚地說明本發(fā)明實施例中的技術方案，下面將對實施例或現(xiàn)有技術描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本發(fā)明的一些實施例，對于本領域普通技術人員來講，在不付出創(chuàng)造性勞動的前提下，還可以根據(jù)這些附圖獲得其他的附圖。

圖1為本發(fā)明一實施例提供的異常數(shù)據(jù)處理方法的流程示意圖；

圖2為本發(fā)明另一實施例提供的異常數(shù)據(jù)處理方法的流程示意圖；

圖3為本發(fā)明再一實施例提供的異常數(shù)據(jù)處理方法的流程示意圖；

圖4為本發(fā)明又一實施例提供的異常數(shù)據(jù)處理方法的流程示意圖；