[發明專利]搜索數據處理方法及相關產品

在審

• 申請號: 202010131859.1
• 申請日: 2020-02-29
• 公開（公告）號: CN111427917A
• 公開（公告）日: 2020-07-17
• 發明（設計）人: 郭旭輝
• 申請（專利權）人: 中國平安人壽保險股份有限公司
• 主分類號: G06F16/2457
• 分類號: G06F16/2457
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 熊永強;彭程

本申請實施例公開了一種搜索數據處理方法及相關產品，所述方法包括：接收第一數據源傳輸的第一搜索數據集，接收第二數據源傳輸的多個搜索業務記錄；依據所述多個搜索業務記錄生成第二搜索數據集，將所述第二搜索數據集和所述第一搜索數據集作為待消費數據異步歸檔至預設消息隊列；從所述預設消息隊列中提取所述待消費數據執行消費操作得到第三搜索數據集；存儲所述第三搜索數據集至預設的第一數據庫和第二數據庫。實施本申請實施例具有用戶體驗度高的優點。

技術領域

本申請涉及數據存儲領域，具體涉及一種搜索數據處理方法及相關產品。

背景技術

隨著互聯網技術的快速發展，搜索成為目前互聯網產品的基本功能，搜索無論對于傳統互聯網時代B端應用或者移動互聯網C端應用都是極為基本核心的組成部分，一個應用程序的搜索功能的強大與否對于增強用戶體驗以及提高用戶粘性有著極大的作用。

在搜索工作流程中，核心關鍵之處為搜索元數據的入庫落地，傳統的搜索元數據歸檔基本采用同步處理，即一次采集入庫，但是，這種處理方式在面對突發情況時可能無法做到數據及時恢復，并且，在處理過程業務數據時，這種歸檔操作并發性能差，可能會大規模占有系統物理資源，從而導致其他系統服務阻塞，導致應用程序整體網絡交互延遲，用戶體驗度低下。

發明內容

本申請實施例提供一種搜索數據處理方法及相關產品，通過對第一搜索數據集和第二搜索數據集異步歸檔至預設消息隊列后執行消費操作得到第三搜索數據集，將第三搜索數據集存儲至第一數據庫和第二數據庫，實現數據解耦，有利于減少系統物理資源占用率，從而降低網絡交互延遲，提高用戶體驗度。

第一方面，本申請實施例提供一種搜索數據歸檔方法，包括：

接收第一數據源傳輸的第一搜索數據集，接收第二數據源傳輸的多個搜索業務記錄；

依據所述多個搜索業務記錄生成第二搜索數據集，將所述第二搜索數據集和所述第一搜索數據集作為待消費數據異步存儲至預設消息隊列；

從所述預設消息隊列中提取所述待消費數據執行消費操作得到第三搜索數據集；

存儲所述第三搜索數據集至預設的第一數據庫和第二數據庫。

第二方面，本申請實施例提供一種搜索數據歸檔裝置，包括：

接收單元，用于接收第一數據源傳輸的第一搜索數據集，接收第二數據源傳輸的多個搜索業務記錄；

生成單元，用于依據所述多個搜索業務記錄生成第二搜索數據集，將所述第二搜索數據集和所述第一搜索數據集作為待消費數據異步存儲至預設消息隊列；

消費單元，用于從所述預設消息隊列中提取所述待消費數據執行消費操作得到第三搜索數據集；

存儲單元，用于存儲所述第三搜索數據集至預設的第一數據庫和第二數據庫。

第三方面，本申請實施例提供一種電子設備，其特征在于，包括處理器、存儲器、通信設備以及一個或多個程序，處理器、存儲器和通信設備相互連接，其中，通信設備用于與外部設備進行信息交互，所述一個或多個程序被存儲在所述存儲器中，并且被配置由所述處理器執行，上述程序包括用于執行本申請實施例第一方面任一方法中的步驟的指令。

第四方面，本申請實施例提供了一種計算機可讀存儲介質，其中，上述計算機可讀存儲介質存儲用于電子數據交換的計算機程序，其中，上述計算機程序使得計算機執行如本申請實施例第一方面所述的方法中所描述的部分或全部步驟。

第五方面，本申請實施例提供了一種計算機程序產品，其中，上述計算機程序產品包括存儲了計算機程序的非瞬時性計算機可讀存儲介質，上述計算機程序可操作來使計算機執行如本申請實施例第一方面所述的方法中所描述的部分或全部步驟。該計算機程序產品可以為一個軟件安裝包。