[發(fā)明專利]數(shù)據(jù)處理方法、裝置、電子設(shè)備及存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202110593711.4
• 申請日: 2021-05-28
• 公開（公告）號: CN113360258A
• 公開（公告）日: 2021-09-07
• 發(fā)明（設(shè)計）人: 李瑞高;劉準(zhǔn);何伯磊;李雅楠;潘秋桐
• 申請（專利權(quán)）人: 北京百度網(wǎng)訊科技有限公司
• 主分類號: G06F9/48
• 分類號: G06F9/48;G06F11/07;G06F16/951
• 代理公司: 北京清亦華知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11201
• 代理人: 王萌

本公開提出了數(shù)據(jù)處理方法、裝置、電子設(shè)備及存儲介質(zhì)，涉及數(shù)據(jù)處理技術(shù)領(lǐng)域，具體涉及智能搜索等技術(shù)領(lǐng)域。具體實現(xiàn)方案為：獲取待處理數(shù)據(jù)以及待處理數(shù)據(jù)的數(shù)據(jù)類型；按照數(shù)據(jù)類型對應(yīng)的任務(wù)鏈對待處理數(shù)據(jù)進行處理，以獲取待處理數(shù)據(jù)的處理狀態(tài)數(shù)據(jù)，其中，處理狀態(tài)數(shù)據(jù)包括：待處理數(shù)據(jù)在任務(wù)鏈中各個任務(wù)節(jié)點的處理狀態(tài)；根據(jù)待處理數(shù)據(jù)在任務(wù)鏈中各個任務(wù)節(jié)點的處理狀態(tài)，確定待處理數(shù)據(jù)是否存在異常處理情況。該方法根據(jù)待處理數(shù)據(jù)在任務(wù)鏈中各個任務(wù)節(jié)點的處理狀態(tài)，使待處理數(shù)據(jù)在任務(wù)鏈中的每個任務(wù)節(jié)點都有跡可查，提高待處理數(shù)據(jù)的入庫可靠性，另外，通過確定待處理數(shù)據(jù)是否存在異常處理情況，可提高數(shù)據(jù)構(gòu)建系統(tǒng)的穩(wěn)定性與準(zhǔn)確性。

技術(shù)領(lǐng)域

本公開涉及數(shù)據(jù)處理技術(shù)領(lǐng)域，具體涉及智能搜索等技術(shù)領(lǐng)域，尤其涉及數(shù)據(jù)處理方法、裝置、電子設(shè)備及存儲介質(zhì)。

背景技術(shù)

在當(dāng)今互聯(lián)網(wǎng)信息檢索中，通常需要數(shù)據(jù)構(gòu)建系統(tǒng)對數(shù)據(jù)進行處理(如，建立倒排索引)，以實現(xiàn)輸入查詢詞檢索到所求內(nèi)容的目的。為了提高檢索結(jié)果的準(zhǔn)確性和全面性，需要提高數(shù)據(jù)構(gòu)建系統(tǒng)的穩(wěn)定性與準(zhǔn)確性，以及提高每一條入庫數(shù)據(jù)的可靠性。

發(fā)明內(nèi)容

本公開提供了一種用于數(shù)據(jù)處理方法、裝置、電子設(shè)備及存儲介質(zhì)。

根據(jù)本公開的一方面，提供了一種數(shù)據(jù)處理方法，包括：獲取待處理數(shù)據(jù)，以及所述待處理數(shù)據(jù)的數(shù)據(jù)類型；按照所述數(shù)據(jù)類型對應(yīng)的任務(wù)鏈對所述待處理數(shù)據(jù)進行處理，以獲取所述待處理數(shù)據(jù)的處理狀態(tài)數(shù)據(jù)，其中，所述處理狀態(tài)數(shù)據(jù)包括：所述待處理數(shù)據(jù)在所述任務(wù)鏈中各個任務(wù)節(jié)點的處理狀態(tài)；根據(jù)所述待處理數(shù)據(jù)在所述任務(wù)鏈中各個任務(wù)節(jié)點的處理狀態(tài)，確定所述待處理數(shù)據(jù)是否存在異常處理情況。

根據(jù)本公開的另一方面，提供了一種數(shù)據(jù)處理裝置，包括：獲取模塊，用于獲取待處理數(shù)據(jù)，以及所述待處理數(shù)據(jù)的數(shù)據(jù)類型；處理模塊，用于按照所述數(shù)據(jù)類型對應(yīng)的任務(wù)鏈對所述待處理數(shù)據(jù)進行處理，以獲取所述待處理數(shù)據(jù)的處理狀態(tài)數(shù)據(jù)，其中，所述處理狀態(tài)數(shù)據(jù)包括：所述待處理數(shù)據(jù)在所述任務(wù)鏈中各個任務(wù)節(jié)點的處理狀態(tài)；確定模塊，用于根據(jù)所述待處理數(shù)據(jù)在所述任務(wù)鏈中各個任務(wù)節(jié)點的處理狀態(tài)，確定所述待處理數(shù)據(jù)是否存在異常處理情況。

根據(jù)本公開的另一方面，提供了一種電子設(shè)備，包括：至少一個處理器；以及與所述至少一個處理器通信連接的存儲器；其中，所述存儲器存儲有可被所述至少一個處理器執(zhí)行的指令，所述指令被所述至少一個處理器執(zhí)行，以使所述至少一個處理器能夠執(zhí)行本公開第一方面實施例所述的方法。

根據(jù)本公開的另一方面，提供了一種存儲有計算機指令的非瞬時計算機可讀存儲介質(zhì)，所述計算機指令用于使所述計算機執(zhí)行本公開第一方面實施例所述的方法。

根據(jù)本公開的另一方面，包括計算機程序，所述計算機程序在被處理器執(zhí)行時實現(xiàn)本公開第一方面實施例所述的方法。

應(yīng)當(dāng)理解，本部分所描述的內(nèi)容并非旨在標(biāo)識本公開的實施例的關(guān)鍵或重要特征，也不用于限制本公開的范圍。本公開的其它特征將通過以下的說明書而變得容易理解。

附圖說明

附圖用于更好地理解本方案，不構(gòu)成對本公開的限定。其中：

圖1是根據(jù)本公開第一實施例的示意圖；

圖2是根據(jù)本公開第二實施例的示意圖；

圖3是根據(jù)本公開實施例的處理狀態(tài)的示意圖；

圖4是根據(jù)本公開第三實施例的示意圖；

圖5是根據(jù)本公開第四實施例的示意圖；

圖6是根據(jù)本公開第五實施例的示意圖；

圖7是根據(jù)本公開第六實施例的示意圖；

圖8是根據(jù)本公開實施例的數(shù)據(jù)處理流程示意圖；

圖9是根據(jù)本公開第七實施例的示意圖；